Hadoop2.6.0偽分佈環境搭建
阿新 • • 發佈:2019-01-22
Hadoop2.6.0偽分佈環境搭建
用到的軟體:
一、安裝jdk:
1、要安裝的jdk,我把它拷在了共享資料夾裡面。
(用優盤拷也可以)
2、我把jdk拷在了使用者資料夾下面。
(其他地方也可以,不過路徑要相應改變)
3、執行復制安裝解壓命令:
解壓完畢:
檢視解壓的資料夾:
4、配置 環境變數:
寫入如下5行程式碼:
使配置生效:
5、檢視安裝的jdk:
java -version
java
javac
二、SSH免密碼登陸:
1、安裝SSH:
2、是否生成 .ssh 目錄:
3、如果沒有生成,自己手動建立一個 .ssh 目錄:
生成的 .ssh 目錄:
4、生成公鑰與私鑰:
效果如下:
5、將公鑰加入到用於認證的公鑰檔案中:
6、免密碼登陸:
效果:
Ubuntu 免密碼登陸,SSH配置完。
三、安裝配置Hadoop:
1、複製安裝解壓Hadoop :
解壓完畢效果:
2、配置 etc/profile
3、配置 hadoop-env.sh
進入
4、修改hadoop-2.6.0檔案許可權為使用者許可權:
預設沒有mapred-site.xml檔案,複製mapred-site.xml.template一份,並把名字改為mapred-site.xml
5、配置下面4 個重要檔案:
mapred-site.xml
core-site.xml
hdfs-site.xml
yarn-site.xml
6、格式化:
格式化部分效果:
7、啟動:
先啟動 start-dfs.sh:
效果:
再啟動 start-yarn.sh:
效果:
關閉hadoop:
(注:也可以 sbin/start-all.sh: 建議分開啟動。)效果一樣,如下:
8、檢視Web頁面資訊:
至此,hadoop-2.6.0偽分佈配置成功。