關於在阿里雲伺服器或者騰訊雲伺服器(或者兩者混合)搭建Hadoop 2.0 HA的注意事項
阿新 • • 發佈:2019-02-05
我是用阿里雲和騰訊雲混合的三臺伺服器搭建hadoop2.0 HA,按照教程總是出現莫名其妙的錯誤,用了三天時間才解決,下面是注意事項
1.配置hosts檔案的時候,本機用內網ip和主機名對映,並新增其他機器的公網ip和主機名的對映。
這是關鍵,由於之前三臺機器的hosts檔案要不都是內網ip,要不都是公網ip,結果總是出錯
2.hadoop和zookeeper相關的配置檔案儘量都用公網ip地址,這樣不用解析,如果按照1配置hosts後,理論上用那個主機名也可,這個沒有
測試,最好都用公網ip
3.雖然設定了ssh免密碼登入,一定要注意在經常使用的機器上設定免密碼登入的其他機器即可,如果不嫌麻煩,也可以設定互相免密碼登入,
再啟動yarn的時候只能啟動本地的resourcemanager,另一個旁站(standby)的要自己手動啟動一下,命令為yarn-daemon .sh start resourcemanager