1. 程式人生 > >初識hadoop框架及hadoop1.x 與hadoop2.x的區別

初識hadoop框架及hadoop1.x 與hadoop2.x的區別

今天,小編帶大家初識hadoop的相關知識及架構!


第二種方式為永久改變主機名,開機不變





平行計算框架:mapreduce

Yarh:資源管理平臺,任務排程器(2.2.0),hdfs(2.2.0記憶體擴充套件)

計算同,管理不同

Hbase實時分佈資料庫

Zookeeper協助hbase工作,有時間同步的要求

Hive:檔案管理,提供介面(類似sql語句;轉換成mapreduce,)

Pig:動態語言,轉成mapreduce



Namenode擴充套件到2個,

Hdoop1.x守護程序,如下:









Map:分散   reduce:規約

開發人員只需要編寫map,reduce函式,即可在hadoop上按著指定的業務邏輯執行程式,簡單方便!