不多說，直接上乾貨！

寫在前面的話

　　（1） 最近一段時間，因擔任我團隊實驗室的大資料環境叢集真實物理機器工作，至此，本人秉持負責、認真和細心的態度，先分別在虛擬機器上模擬搭建ambari（基於CentOS6.5版本）和cloudermanager（基於CentOS6.5或Ubuntu14.04版本）。

　　（2）  大資料叢集範圍包括3節點和4節點。本人都嘗試過。

　　（3）  安裝搭建包括離線和線上。本人都嘗試過

　　（4）  版本包括自定義指定和官方最新版本搭建。本人都嘗試過。

　　（5） 大資料叢集節點的增加和刪減。本人都嘗試過。

　　（6） 虛擬機器和真實物理機上搭建。本人都嘗試過。

　　我的機器情況是

　　nssa-sensor1 (192.168.30.1）　　　　　　（既做ambari-server，也做ambari-agent）

　　nssa-sensor2 (192.168.30.2）　　　　　　（只做ambari-agent）

　　nssa-sensor3 (192.168.30.3）　　　　　　（只做ambari-agent）

　　nssa-sensor4 (192.168.30.4）　　　　　　（只做ambari-agent）

　　我這裡是，參考

第一步： 關於Ubuntu14.04下安裝Ambari的準備

　　這裡，與CentOS6.5下相同，我這裡不多說

 　　大家，自行去安裝，凡是能來看我這篇部落格的朋友，想必肯定是有一定的基礎了。

第二步：關於ubuntu14.04下部署本地庫，映象伺服器

　　　這裡，大家可以參考如下。

 　　我這裡，考慮到ubuntu14.04，所以  

 　　進行，下載好

　　得到

 　　得到

　　參考官網

https://docs.hortonworks.com/HDPDocuments/Ambari-2.2.1.0/bk_Installing_HDP_AMB/content/_getting_started_setting_up_a_local_repository.html
 

 　　以及，這第二步裡，要注意的是，

　　centos系統裡，是

sudo yum install yum-utils createrepo 

 　　ubuntu系統裡，是

sudo apt-get  install yum-utils createrepo 

 　　centos系統裡，是

sudo yum install httpd

　　ubuntu系統裡，是

sudo apt-get install httpd

　　然後，
　　部署，跟上述部落格一樣，放在/var/www/html下。我這裡不多贅述。

　　　　　　或者放在//usr/local/apache/htdocs下，都是可以的。

　　參考我下面的部落格，

　　總結：就是，這裡我們自定義構建區域網源，一種是放在/var/www/html下，一種是放在/usr/local/apache/htdocs下。都是可以的

　　最後，我將截圖如下

 

 　　/usr/loca/apache/htdocs

 

 　　/var/www/html

 

 

 

　　然後，大家，可以將官方的，改成自己本地局域建立的本地源。用來安裝ambari。

sudo wget http://public-repo-1.hortonworks.com/ambari/ubuntu14/2.x/updates/2.2.1.0/ambari.list

　　這是官網的。裡面的內容如下

#VERSION_NUMBER=2.2.1.0-161
deb http://public-repo-1.hortonworks.com/ambari/ubuntu14/2.x/updates/2.2.1.0 Ambari main

　　我們要改成自己的。

#VERSION_NUMBER=2.2.1.0-161
deb http://192.168.30.1/hdp2.4/ubuntu14

 　　或者

#VERSION_NUMBER=2.2.1.0-161
deb http://192.168.30.1/hdp2.4/ubuntu14　　Ambari main

　　貼圖如下

 　　即，是如下。說明自定義區域網搭建的本地源，成功！

 　　這裡是，官網

 　　我這裡，是採取離線方式的安裝，即先下載好，再來安裝。

　　 若大家，想線上安裝的話，自行結合官網，然後和這篇部落格來吧

第三步：Ubuntu14.04下，安裝並配置Ambaro-server

　　　這裡，可以參考

　　注意這裡，用到的源還是官網的

　　sudo vim /etc/apt/sources.list.d

#VERSION_NUMBER=2.2.1.0-161
deb http://public-repo-1.hortonworks.com/ambari/ubuntu14/2.x/updates/2.2.1.0 Ambari main

 

sudo   apt-get install ambari-server

　　正在安裝中....

 

 　　至此，ambari-server安裝完成！

 　　接下來，就是對ambari-server進行設定

　　這是我的jdk安裝路徑

 

 

 　　這裡為什麼要回車，因為提示必須安裝MySQL JDBC，回車結束ambari配置。

　　怎麼來解決呢？需要將Ambari資料庫指令碼匯入到資料庫。

　　用Ambari使用者（上面設定的使用者）登入mysql

 　　我是這麼先設定好的

mysql> create database ambari DEFAULT CHARACTER SET utf8;
Ignoring query to other database
mysql> grant all on ambari.* TO 'hive'@'localhost' IDENTIFIED BY 'ambari_password';
Ignoring query to other database
mysql> grant all on *.* TO 'ambari'@'nssa-sensor1' IDENTIFIED BY 'ambari_password';
Ignoring query to other database
mysql> grant all on ambari.* TO 'ambari'@'%' IDENTIFIED BY 'ambari_password';  
Ignoring query to other database

mysql> flush privileges;

mysql> exit;

　　或者

mysql> create database ambari DEFAULT CHARACTER SET utf8;
Ignoring query to other database

Ignoring query to other database
mysql> grant all on *.* TO 'ambari'@'nssa-sensor1' IDENTIFIED BY 'ambari_password';


mysql> flush privileges;
mysql> exit;

　　然後，將Ambari資料庫指令碼匯入到資料庫

mysql -uambari -pambari_password -hnssa-sensor1
use ambari
source /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql

　　注意：這裡密碼和主機名，要根據你自己的機器去做。

　　至此，ambari-server的安裝和設定都做完成了。

 　　接下來，就是啟動ambari-server了。

sudo  service ambari-server   status


sudo  service ambari-server   start

 

 

第四步：　　搭建單節點叢集

　　這裡，可以參考

 　　這裡，單節點的安裝，我就不多贅述了。因為，我這裡是搭建的真實物理機器，4臺。

第五步：  搭建3或4節點叢集

　　這裡，可以參考

 

 

 

 

 

 

 

 

 

 

 　　在這一步，安裝過程中，大家也許會出現問題。

 

 　　大家，可以去看我的部落格

　　裡面有講到如何去解決

　　同時，我這裡，還遇到一個問題。在安裝的過程中，沒有許可權去讀取/var/lib/ambari-agent的data目錄，這個很好解決，去放開許可權，等安裝完成後，改回755就是了。

 

 　　我這裡，是所有的元件，我都全部安裝了。

 

 

 

 

 　　這裡大家，要去對hive、oozie設定下

mysql> create database hive DEFAULT CHARACTER SET utf8;

mysql> grant all on *.* TO 'hive'@'nssa-sensor1' IDENTIFIED BY 'hive_password';


mysql> flush privileges;
mysql> exit;

mysql> create database oozie DEFAULT CHARACTER SET utf8;

mysql> grant all on *.* TO 'oozie'@'nssa-sensor1' IDENTIFIED BY 'oozie_password';


mysql> flush privileges;
mysql> exit;

 

 

 　　其實啊，這些步驟，大家完全可以去看的這篇部落格

 

 

 

 

 

　　這些都是瀏覽資訊，大家看看就好

 

 　

 　　在這一步分發過程中，非常重要。大家會根據自己的網速和安裝，會出現一些問題。

 　　大家，可以去看這篇部落格

 　　當然，我這裡作為補充

 　　其實，這樣的，如oozie client insatll 或者 hadoop client install 或者 zookeeper  client install安裝失敗的原因。

　　 歸結為就是第一次安裝時，網速不穩定，導致，大家在反覆安裝，造成了軟連線死鎖的問題。

　　這個問題的解決，其實很簡單。

　　第一：大家可以去看這篇部落格

　　這是一種解決方案的思路。

　　第二：也是我自己摸索出來的

　　我這裡，是nssa-sensor2這臺機器，已經安裝好了，而其他的nssa-sensor1、nssa-sensor3和nssa-sensor4機器出現了上述問題。

　　這樣，大家，就把這臺已經正常安裝好了的機器的對應目錄（哪個元件出錯了），拷貝過去就行了。

　　具體見我下面的貼圖。

 

 

 

 　　這是/etc/zookeeper/2.4.0.0-169/0目錄結構

 

 　　這是/usr/hdp/2.4.0.0-169/zookeeper目錄結構

 

 　　這是/usr/hdp/2.4.0.0-169/zookeeper目錄結構

 

 　　這是/usr/hdp/current/oozie-client目錄結構

 

 　　這是/usr/hdp/current/oozie-server的目錄結構

 

　　至此，上述問題得以解決。

 　　然後，大家還會出現，這個在oozie安裝的過程中，會出現mysql-connect-java的jar包放置問題。

　　這裡，大家，可以去看我下面寫的部落格

 　　同時，要注意，/usr/share/java目錄結構，是如下（大家也可以使用我剛說的技巧，就是已經成功了的機器，將其ooize的目錄結構和這個/usr/share/java拷貝過來就可以了）（別說自己沒U盤，我這裡是在真實物理機器上搭建的，我都可以拷貝做到，或者你也可以使用scp -r命令）

 

 

 

 

　　關於更多詳情和疑問，見我寫的部落格

http://www.cnblogs.com/zlslch/category/916378.html

參考

歡迎大家，加入我的微信公眾號：大資料躺過的坑        人工智慧躺過的坑

同時，大家可以關注我的個人部落格：

   http://www.cnblogs.com/zlslch/   和     http://www.cnblogs.com/lchzls/      http://www.cnblogs.com/sunnyDream/   

   詳情請見：http://www.cnblogs.com/zlslch/p/7473861.html

　　人生苦短，我願分享。本公眾號將秉持活到老學到老學習無休止的交流分享開源精神，匯聚於網際網路和個人學習工作的精華乾貨知識，一切來於網際網路，反饋回網際網路。
　　目前研究領域：大資料、機器學習、深度學習、人工智慧、資料探勘、資料分析。 語言涉及：Java、Scala、Python、Shell、Linux等 。同時還涉及平常所使用的手機、電腦和網際網路上的使用技巧、問題和實用軟體。 只要你一直關注和呆在群裡，每天必須有收穫

      對應本平臺的討論和答疑QQ群：大資料和人工智慧躺過的坑（總群）（161156071）