1. 程式人生 > >Hadoop2.6.0偽分佈環境搭建

Hadoop2.6.0偽分佈環境搭建

Hadoop2.6.0偽分佈環境搭建

用到的軟體:

一、安裝jdk

1、要安裝的jdk,我把它拷在了共享資料夾裡面。

(用優盤拷也可以)

2、我把jdk拷在了使用者資料夾下面。

(其他地方也可以,不過路徑要相應改變)

3、執行復制安裝解壓命令:

 解壓完畢:

 

檢視解壓的資料夾:

4、配置 環境變數:

寫入如下5行程式碼:

使配置生效:

5、檢視安裝的jdk

java -version

java

javac

 

二、SSH免密碼登陸:

1、安裝SSH


2、是否生成 .ssh 目錄:

 

3、如果沒有生成,自己手動建立一個 .ssh 目錄:

 

生成的 .ssh 目錄:

4、生成公鑰與私鑰:

效果如下:

 

5、將公鑰加入到用於認證的公鑰檔案中:

 

6、免密碼登陸:

效果:

 

Ubuntu 免密碼登陸,SSH配置完。

三、安裝配置Hadoop

1、複製安裝解壓Hadoop

 

解壓完畢效果:

 

2、配置 etc/profile

 


3、配置 hadoop-env.sh

進入

 



4、修改hadoop-2.6.0檔案許可權為使用者許可權:

預設沒有mapred-site.xml檔案,複製mapred-site.xml.template一份,並把名字改為mapred-site.xml

5、配置下面4

個重要檔案:

mapred-site.xml

 

 

core-site.xml

 

hdfs-site.xml

 

 

yarn-site.xml

 

 

6、格式化:

格式化部分效果:

7、啟動:

先啟動  start-dfs.sh

效果:

再啟動  start-yarn.sh

效果:

關閉hadoop:

 

(注:也可以  sbin/start-all.sh:  建議分開啟動。)效果一樣,如下:

 

8、檢視Web頁面資訊:

 

 

至此,hadoop-2.6.0偽分佈配置成功。