一. 背景

1.1 網路上的大部分教程的順序

1. 啟動順序

• Hadoop
• ZooKeeper
• HBase
• 第二個HMaster

2. 停止順序

• 第二個 HMaster，kill-9 刪除
• Hbase
• ZooKeeper
• Hadoop

Note：網上的以上的順序並不適合 HA 模式下

1.2 主機規劃

1.3 正確的啟動順序

1. ZooKeeper -> Hadoop -> HBase

2. ZooKeeper -> JournalNode (Hadoop) -> NameNode (Hadoop)

二. 首次啟動/格式化叢集

1. 啟動 ZooKeeper 叢集 在叢集中安裝 ZooKeeper 的主機上啟動 ZooKeeper 服務。在本教程中也就是在 slave51、slave52、slave53 的主機上啟動相應程序。分別登陸到三臺機子上執行：

zkServer.sh start

• 1

2. 格式化 ZooKeeper 叢集 在任意的 namenode 上都可以執行，筆者還是選擇了 master5 主機執行格式化命令

hdfs zkfc –formatZK

• 1

3. 啟動 JournalNode 叢集 分別在 slave51、slave52、slave53 上執行以下命令

hadoop-daemon.sh start journalnode

• 1

4. 格式化叢集的 NameNode

在 master5 的主機上執行以下命令，以格式化 namenode：

hdfs namenode -format

• 1

5. 啟動剛格式化的 NameNode 剛在 master5 上格式化了 namenode ，故就在 master5 上執行

adoop-daemon.sh start namenode

• 1

6. 同步 NameNode1 元資料到 NameNode2 上 複製你 NameNode 上的元資料目錄到另一個 NameNode，也就是此處的 master5 複製元資料到 master52 上。在 master52 上執行以下命令：

hdfs namenode -bootstrapStandby

• 1

7. 啟動 NameNode2 master52 主機拷貝了元資料之後，就接著啟動 namenode 程序了，執行

hadoop-daemon.sh start namenode

• 1

8. 啟動叢集中所有的DataNode

在 master5 上執行

hadoop-daemons.sh start datanode

• 1

9. 在 RM1 啟動 YARN

在 master5 的主機上執行以下命令：

start-yarn.sh

• 1

10. 在 RM2 單獨啟動 YARN

雖然上一步啟動了 YARN ，但是在 master52 上是沒有相應的 ResourceManager 程序，故需要在 master52 主機上單獨啟動：

yarn-daemon.sh start resourcemanager

• 1

11. 啟動 ZKFC

在 master5 和 master52 的主機上分別執行如下命令：

hadoop-daemon.sh start zkfc

• 1

12. 開啟歷史日誌服務

在 master5 和 master52 的主機上執行

mr-jobhistory-daemon.sh   start historyserver

• 1

13. 啟動主 HMaster

在其中一臺主機上啟動 Hmaster，即筆者在 master5 上

start-hbase.sh 

• 1

14. 啟動備份 HMaster 另一臺 Hmaster 的主機上，即筆者在 master52 上，執行以下命令

hbase-daemon.sh start master

• 1

三. 開啟與關閉叢集順序

3.1 Hadoop 生態系統叢集的啟動順序概覽

以下中標註紅色加粗的即為筆者叢集目前已經安裝的。

3.2 非首次啟動叢集

Note：與 “首次啟動格式化叢集” 不同的是沒有 格式化 ZooKeeper 叢集 和 格式化叢集的 NameNode 這兩個步驟！

3.3 Hadoop 生態系統叢集的關閉順序概覽

以下中標註紅色加粗的即為筆者叢集目前已經安裝的。

3.4 叢集關閉

注意：一定要按順序停止，如果先停 ZooKeeper 再停 HBase 的話，基本停不下來

四. 常見問題與參考資料

4.1 常見問題

1. 我啟動 ZKFC 和 NameNode 守護程序的順序重要麼？

不重要，在任何給定的節點上，你可以任意順序啟動 ZKFC 和 NameNode 程序

2. 如果Zookeeper宕機會怎樣？

如果 Zookeeper 叢集宕機，沒有自動故障轉移將會被觸發。但是，HDFS 將繼續沒有任何影響的執行。當 Zookeeper 被重新啟動，HDFS 將重新連線，不會出現問題

3. 我可以指定兩個 NameNode 中的一個作為主要的 NameNode 麼？

當然不可以。目前，這是不支援的。先啟動的 NameNode 將會先變成 Active 狀態。你可以指定的順序，先啟動你希望成為 Active 的節點，來完成這個目的。所以筆者我在後面的叢集管理指令碼中，啟動完一臺 NameNode 後再啟動 ZKFC。和以上的順序有點出入，但一點問題都木有~

4.2 參考資料

				<script>
					(function(){
						function setArticleH(btnReadmore,posi){
							var winH = $(window).height();
							var articleBox = $("div.article_content");
							var artH = articleBox.height();
							if(artH > winH*posi){
								articleBox.css({
									'height':winH*posi+'px',
									'overflow':'hidden'
								})
								btnReadmore.click(function(){
									articleBox.removeAttr("style");
									$(this).parent().remove();
								})
							}else{
								btnReadmore.parent().remove();
							}
						}
						var btnReadmore = $("#btn-readmore");
						if(btnReadmore.length>0){
							if(currentUserName){
								setArticleH(btnReadmore,3);
							}else{
								setArticleH(btnReadmore,1.2);
							}
						}
					})()
				</script>
				</article>