0.環境概要

Linux：Ubuntu 16.04
hadoop：Hadoop 2.9.0
jdk：1.8.0
vmware：14.0 pro

1.Linux環境部署

1.1第一步配置Vmware NAT網路

　　　　vmware虛擬機器的配置，主要是網路配置，選擇NAT網路，Ubuntu在我的電腦上不需要配置網路，選擇預設就好。centos系統需要修改配置檔案，請看這裡。所以這一步跳過啦。

1.2第二步Vmware安裝Linux作業系統

1.關閉防火牆

chkconfig iptables off

2.關閉selinux

vim /etc/sysconfig/selinux

修改為

# This file controls the state of SELinux on the system.
# SELINUX= can take one of these three values:
#     enforcing - SELinux security policy is enforced.
#     permissive - SELinux prints warnings instead of enforcing.
#     disabled - No SELinux policy is loaded.
SELINUX=disabled   #修改這個地方為disabled
# SELINUXTYPE= can take one of these two values:
#     targeted - Targeted processes are protected,
#     mls - Multi Level Security protection.
SELINUXTYPE=targeted
 

2.hostname修改（永久）

vim /etc/sysconfig/network
NETWORKING=yes  #使用網路
HOSTNAME=hadoop00  #設定主機名

vim /etc/hosts

```
```
vim /etc/hosts

vim /etc/hosts

```
3.免密碼登入


4.建立工作目錄


5.安裝jdk-配置環境變數
a.官網下載JDK檔案：[JDK下載](l)
選擇對應的JDK，此處為jdk-8u151-linux-x64.tar.gz
b.建立一個資料夾```sudo mkdir /java```
c.將檔案解壓至該資料夾
```tar -zxvf jdk-8u151-linux-x64.tar.gz -C /java```
d.配置jdk的環境變數
```sudo gedit /etc/profile```
在末尾加入以下語句
```PATH="/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/local/games:$JAVA_HOME/bin"
export CLASSPATH=.:\$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export JAVA_HOME=/java/jdk1.8.0_121```
e.修改完成之後儲存關閉，並輸入以下命令使環境變數立即生效
```source /etc/profile```
f.輸入```java -version```，顯示JDK版本說明恭喜你，環境變數配置正確,繼續下一步






6.Hadoop本地模式安裝
| 模式名稱| 各個模組佔用的JVM程序數| 各個模組執行在幾個機器數上 |
| :------|||
| 本地模式| 1個| 1個|
| 偽分散式模式| N個| 1個|
| 完全分散式模式| N個| N個|
| HA完全分散式| N個| N個|


1.下載Hadoop安裝包[

Hadoop Download]
解壓到/home/hadoop
2.修改配置檔案
增加環境變數-java-hadoop
 a.在系統環境變數中新增hadoop的PATH
 
 b.在/hadoop/etc的數個檔案中新增java的PATH
 包括
 yarn-env.sh
 mapred-env.sh
 hadoop-env.sh
 
 c.配置hadoop環境
 包括
 yarn-site.xml
 hdfs-site.xml
 core-site.xml
source


vmware克隆虛擬機器2份
關閉虛擬機器後，點選管理-克隆-建立完整克隆
重複克隆一次，兩個虛擬機器分別命名為slave1.slave2


分發到子機器

啟動start-dsf，yarn

啟動yarn的網頁host：http://localhost:8088/cluster

編輯時間：2018/4/9

教程還不是很完善，從markdown上粘過來很多東西都丟失啦。有問題請聯絡我。

教程參考了許許多多的網路資源和以下幾位的部落格，謝謝。