引言：

環境：

一、安裝虛擬機器

在windows系統中安裝VMware14pro，直接下載安裝，無需贅述

ps：如有條件，請購買使用

二、安裝linux作業系統

CentOS 是一個基於Red Hat Linux 提供的可自由使用原始碼的企業級Linux發行版本。也可以選擇其他Linux發行版。例如： Ubuntu、Fadora

1、下載centos7映象檔案

2、安裝centos7

2.1  建立虛擬機器

         選擇建立新的虛擬機器——選擇典型安裝——選擇centos7映象獲取位置——選擇centos7系統安裝位置——磁碟大小預設20G

點選完成即可完成系統安裝

2.2 配置作業系統

         進入配置介面——選擇語言中文——軟體選擇（最小化安裝或者帶圖形介面）——網路與主機名自行配置——選擇開始安裝

安裝完成之後開啟虛擬機器設定，網路介面卡選擇僅主機模式（也可選擇其他模式，此處僅配置單機hadoop，選用僅主機模式）

ps：這裡簡單介紹一下三種網路模式

橋接模式：相當於在宿主機前端加入了一個虛擬交換器，宿主機和虛擬機器共享這個虛擬交換器，虛擬機器需要手動配置IP地址、子網掩碼，而且需要和宿主機處於同一個網段，保證能與宿主機進行通訊。虛擬機器相當於一臺獨立主機。

NAT模式：此種模式下宿主機成為雙網絡卡主機，同時參與現有 的宿主區域網和新建的虛擬區域網，虛擬區域網通過虛擬的NAT伺服器，使用宿主機IP地址訪問公網。

僅主機模式：此種模式下宿主機與上所以虛擬機器可以相互通訊，但是虛擬機器和真實網路是被隔離開的。

3、修改主機名

把原先的主機名刪去，寫入新的主機名 hadoop，儲存退出

修改主機名需要重啟才能生效，可以通過臨時修改使得主機名立即生效

檢視當前主機名

表示修改成功

4、設定靜態ip

檢視當前網路狀態：

第一個網絡卡lo是迴路網絡卡，機器與自己通訊的，

第二個ens33是與外部通訊的網絡卡，可以看到IP地址，但預設情況下IP地址自動獲取，因此需要手動修改成靜態

輸入指令：

開啟ens33配置檔案

將“BOOTPROTO=dhcp”改成“BOOTPROTO=static

”（設定成靜態）

將“ONBOOT=no”修改成“ONBOOT=yes”（設定開機啟動網絡卡）

在下面寫入：

IPADDR=192.168.80.128

NETMASK=255.255.255.0

因此本機網路設定為僅主機模式無法連線外網，所以僅設定IP地址和子網掩碼

其他模式需要連線外網請自行設定閘道器和DNS。

重啟網路即可完成設定

5、新增主機與ip對映

輸入指令

在檔案中寫入一行

192.168.91.124  hadoop

：wq   儲存退出

6、關閉防火牆

啟動： systemctl start firewalld

關閉： systemctl stop firewalld

檢視狀態： systemctl status firewalld 

開機禁用  ： systemctl disable firewalld

開機啟用  ： systemctl enable firewalld

輸入指令    systemctl disable firewalld

若想立即成效，則輸入關閉防火牆指令

systemctl stop firewalld

7、設定ssh免登陸

authorized_keys:存放遠端免密登入的公鑰,主要通過這個檔案記錄多臺機器的公鑰 
id_rsa : 生成的私鑰檔案 
id_rsa.pub ： 生成的公鑰檔案 
know_hosts : 已知的主機公鑰清單 

輸入指令生成祕鑰

enter幾次之後完成祕鑰生成

輸入ls指令即可檢視生成的祕鑰檔案

將公鑰寫入新的檔案authorized_keys中

測試一下：ssh hadoop

顯示last login並且無需輸入密碼則設定成功

三、安裝與配置jdk

1、解除安裝當前openjdk

檢視當前jdk版本

java -version

hadoop官網推薦使用sun公司的jdk版本，因此先解除安裝原先的jdk

yum -y remove java java-1.8.0-openjdk-headless.x86_64

yum -y remove java java-1.7.0-openjdk-headless.x86_64 

yum -y remove java java-1.8.0-openjdk

檢視是否解除安裝完成

2、安裝jdk

            將jdk安裝包檔案拷入到  usr/java 下

cd到usr/java 目錄下

解壓java安裝包

tar -zxvf jdk1.8.0_181

3、配置環境變數

安裝完成後需要配置一下環境變數，編輯/etc/profile檔案：

vim /etc/profile

在檔案尾部新增如下配置：

export JAVA_HOME=/usr/java/jdk1.8.0_131/
    export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar 
    export PATH=$PATH:$JAVA_HOME/bin

最後一步就是通過source命令重新載入/etc/profile檔案，使得修改後的內容在當前shell視窗有效：

source /etc/profile

4、測試

檢視當前jdk版本

jdk安裝完成！

四、安裝與配置hadoop

1、安裝hadoop

將下載好的hadoop安裝包拷入到  /usr/hadoop 資料夾中

cd 到/usr/java/ 目錄下

tar -zxvf hadoop-2.8.4.tar.gz

解壓完成

2、配置hadoop（修改五個配置檔案）

進入到hadoop的配置檔案目錄中

/usr/hadoop/hadoop-2.8.4/etc/hadoop

2.1 配置 hadoop-env.sh

vi  hadoop-env.sh

將JAVA_HOME修改為jdk安裝路徑

2.2  配置core-site.xml

vi core-site.xml

 # 在<configuration>中新增配置

<configuration>

<!-- 指定HADOOP所使用的檔案系統schema（URI），HDFS的老大（NameNode）的地址 -->

<property>

       <name>fs.defaultFS</name>

       <value>hdfs://hadoop:9000</value>

</property>

<!-- 指定hadoop執行時產生臨時檔案的儲存目錄 -->

<property>

       <name>hadoop.tmp.dir</name>

       <value>/usr/java/jdk1.8.0_181/tmp</value>

</property>

</configuration>

2.3 配置hdfs-site.xml

vi hdfs-site.xml

<configuration>

<!-- 指定HDFS副本的數量 -->

<property>

          <name>dfs.replication</name>

          <value>1</value>

</property>

</configuration>

2.4  配置  mapred-site.xml

將 mapred-site.xml.template複製一份並重命名為 mapred-site.xml

mv mapred-site.xml.template  mapred-site.xml

vi   mapred-site.xml

# 配置mapred-site.xml <configuration>

<!-- 指定mr執行在yarn上 -->

<property>

          <name>mapreduce.framework.name</name>

          <value>yarn</value>

</property>

</configuration>

2.5  配置yarn-site.xml

vi  yarn-site.xml

<configuration>

<!-- 指定YARN的老大（ResourceManager）的地址 -->

 <property>

      <name>yarn.resourcemanager.hostname</name>

       <value>hadoop</value>

</property>

<!-- reducer獲取資料的方式 -->

<property>

          <name>yarn.nodemanager.aux-services</name>

          <value>mapreduce_shuffle</value>

</property>

</configuration>

儲存退出，配置完成！

3、格式化hdfs

cd到bin目錄下

./hdfs namenode -format

看見這一行提示即表示格式化成功

4、啟動並測試hdfs

cd 到sbin目錄下

啟動  start-all.sh

start-all.sh

用jps指令檢視當前啟動的程序

看見下面幾個即表示啟動成功

在瀏覽器位址列中輸入 192.168.91.124:50070（IP地址可能不一樣，埠是一樣的）

登入成功！