第123講：Hadoop叢集管理之Namenode目錄元資料結構詳解學習筆記

hadoop-2.x的叢集管理與hadoop-1.x有很大不同

hdfs-site.xml：

dfs.replication

dfs.namenode.name.dir  存放namenode元資料資訊

可以配置多個目錄，這些目錄完全相同，一個損壞不影響hdfs上的資料。

hadoop-2.6.0/dfs/name/current就是存放namenode元資料資訊的地方

fsimage是映象檔案，包含了namenode所有的元資料資訊。

VERSION中有namespaceID/clusterID/cTime/storagetype/bolckpoolID/layoutVersion

namespaceID是檔案系統的唯一識別符號，格式化檔案系統後就會生成這個ID

clusterID是系統生成的叢集的ID;

cTime是namenode儲存系統建立是時間，第一次格式化系統就是0，再次格式化時就會更新;

toragetype說明檔案儲存的是什麼系統儲存的資訊，可能是namenode/datanode

bolckpoolID是針對每一個namespace對應的bolckpool的ID，包含儲存節點的IP等資訊

seen_txid:存放transactionID,格式化檔案系統後這個數字是0，代表一系列edits_*檔案的尾數，namenode重啟時會迴圈從0001到seen_txid中的數字，

fsimage是整個namenode的映象，包含臨時檔案edits。後面還會講解。

in_user.lock是因為我們啟動了叢集。

以上內容是從王家林老師DT大資料課程第121講的學習筆記。
DT大資料微信公眾賬號：DT_Spark  

王家林老師QQ:1740415547 

王家林老師微訊號：18610086859
 王家林的第一個中國夢：免費為全社會培養100萬名優秀的大資料從業人員！
您可以通過王家林老師的微訊號18610086859發紅包捐助大資料、網際網路+、O2O、工業4.0、微營銷、移動網際網路等系列免費實戰課程， 目前已經發布的王家林免費視訊全集如下：

1，《大資料不眠夜：Spark核心天機解密（共100講）》: http://pan.baidu.com/s/1eQsHZAq

2，《Hadoop深入淺出實戰經典》http://pan.baidu.com/s/1mgpfRPu 

3，《Spark純實戰公益大講壇》http://pan.baidu.com/s/1jGpNGwu 

4，《Scala深入淺出實戰經典》http://pan.baidu.com/s/1sjDWG25 

5，《Docker公益大講壇》http://pan.baidu.com/s/1kTpL8UF 

6，《Spark亞太研究院Spark公益大講堂》http://pan.baidu.com/s/1i30Ewsd 

7，DT大資料夢工廠Spark、Scala、Hadoop的所有視訊、PPT和程式碼在百度雲網盤的連結：

http://pan.baidu.com/share/home?uk=4013289088#category/type=0&qq-pf-to=pcqq.group 

王家林免費在51CTO釋出的1000集合大資料spark、hadoop、scala、docker視訊：

1，《Scala深入淺出實戰初級入門經典視訊課程》http://edu.51cto.com/lesson/id-66538.html 

2，《Scala深入淺出實戰中級進階經典視訊課程》http://edu.51cto.com/lesson/id-67139.html 

3，《Akka深入淺出實戰經典視訊課程》http://edu.51cto.com/lesson/id-77672.html 

4，《Spark亞太研究院決勝大資料時代公益大講堂》http://edu.51cto.com/lesson/id-30815.html 

5，《雲端計算Docker虛擬化公益大講壇 》http://edu.51cto.com/lesson/id-61776.html 

6，《Spark 大講堂（純實戰手動操作）》http://edu.51cto.com/lesson/id-78653.html 

7，《Hadoop深入淺出實戰經典視訊課程-叢集、HDFS、Yarn、MapReduce》http://edu.51cto.com/lesson/id-77141.html 

8，《從技術角度思考Hadoop到底是什麼》http://edu.51cto.com/course/course_id-1151.html 

“DT大資料夢工廠”團隊第一個中國夢：免費為社會培養100萬名優秀的大資料從業人員。每天早上4點起持續分享大資料、網際網路+、O2O、工業4.0、微營銷、移動網際網路等領域的

第121講視訊網站地址：