一、安裝linux 環境 OS Linux：CentOS 6.6 64bit 記憶體 1.5-2GB 硬碟 15-20GB 二、安裝JDK 及修改hostname 1、修改hostname  [[email protected] ~]# vi /etc/sysconfig/network NETWORKING=yes HOSTNAME=master 2、安裝JDK 配置兩個變數 $JAVA_HOME $PATH 備註：設定PATH的時候一定要記得加上$PATH:   不然linux常用命令會失效 export PATH=$PATH:$JAVA_HOME/bin 三、關閉防火牆  service iptables stop chkconfig iptables off 四、配置域名解析 vi /etc/hosts 192.168.1.100 master 192.168.1.101 slave1 192.168.1.102 slave2 192.168.1.103 slave3 測試： ping   五、安裝SSH及配置免密碼SSH登入（互信） $ ssh-keygen $ ssh-copy-id master/slave1/slave2/slave3 六 、安裝步驟 下載並解壓Hadoop Bundle 配置環境變數 配置Hadoop配置檔案 節點分發 格式化NameNode 啟動Hadoop 1、配置環境變數 vi .bash_profile export HADOOP_PREFIX="/home/hadoop/hadoop-2.6.4/"  export PATH=$PATH:$HADOOP_PREFIX/bin  export PATH=$PATH:$HADOOP_PREFIX/sbin  export HADOOP_COMMON_HOME=${HADOOP_PREFIX}  export HADOOP_MAPRED_HOME=${HADOOP_PREFIX}  export HADOOP_HDFS_HOME=${HADOOP_PREFIX}  export YARN_HOME=${HADOOP_PREFIX} export HADOOP_COMMON_LIB_NATIVE_DIR=${HADOOP_PREFIX}/lib/native export HADOOP_OPTS="-Djava.library.path=$HADOOP_PREFIX/lib" source ~/.bash_profile 2、配置Hadoop配置檔案 core-site.xml hdfs-site.xml mapred-site.xml yarn-site.xml hadoop-env.sh和yarn-env.sh slaves 1、core-site.xml core-site.xml檔案包含了NameNode節點的資訊以及NameNode使用的RPC埠。 <property>       <name>fs.defaultFS</name>      <value>hdfs://master:8020</value>      <final>true</final> </property> 2、hdfs-site.xml hdfs-site.xml檔案包含HDFS相關的配置資訊，包括副本系數，NameNode和DataNode儲存資料的目錄等。 <property>      <name>dfs.replication</name>      <value>1</value> </property> <property>      <name>dfs.namenode.name.dir</name>      <value>file:///home/oracle/hadoop-.6.4/hadoop_data/dfs/name</value> </property> <property>      <name>dfs.datanode.data.dir</name>      <value>file:///home/oracle/hadoop-.6.4/hadoop_data/dfs/data</value> </property> 3.mapred-site.xml <property> <name>mapreduce.framework.name</name> <value>yarn</value> </property> 4.yarn-site.xml <property> <name>yarn.resourcemanager.address</name> <value>master:8032</value> </property> <property> <name>yarn.resourcemanager.scheduler.address</name> <value>master:8030</value> </property> <property> <name>yarn.resourcemanager.resource-tracker.address</name>  <value>master:8031</value> </property> <property>  <name>yarn.resourcemanager.admin.address</name>  <value>master:8033</value>  </property> <property> <name>yarn.resourcemanager.webapp.address</name> <value>master:8088</value> </property> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property> <property>  <name>yarn.nodemanager.aux-services.mapreduce_shuffle.class</name>  <value>org.apache.hadoop.mapred.ShuffleHandler</value> </property>  <property> <name>yarn.resourcemanager.scheduler.class</name> <value>org.apache.hadoop.yarn.server.resourcemanager.scheduler.capacity.CapacityScheduler</value> </property> 4.slaves slave檔案包含了所有的從節點的主機名。 slave1 slave2 slave3 3.格式化NameNode hdfs namenode -format 4.Hadoop Web使用者介面 HDFS-NameNode: http://192.168.2.80:50070/ 監控HDFS執行指標 查詢連線到NameNode的DataNode列表 瀏覽檔案系統 YARN-ResourceManager: http://192.168.2.80:8088/ 監控應用程式和叢集資源 NodeManager列表 排程器的詳情