1. 程式人生 > >hp(1) ubuntu 安裝 hadoop (單機版)

hp(1) ubuntu 安裝 hadoop (單機版)

下載

https://mirrors.cnnic.cn/apache/hadoop/common/

建立使用者

sudo useradd -m hadoop -s /bin/bash
sudo passwd hadoop
sudo adduser hadoop sudo

ssh

切換 hadoop
sudo apt-get update
sudo apt-get install openssh-server

配置無密碼ssh

cd ~/.ssh/
ssh-keygen -t rsa 會有提示,都按回車就可以
cat ./id_rsa.
pub >> ./authorized_keys 加入授權 ssh localhost 無需密碼就可以訪問

wordcount

file中建立txt 檔案

./bin/hadoop fs -put file/*.txt input

./bin/hadoop jar ./share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.4.jar wordcount input output