Ambari是apache的頂級專案, 是一套類似一鍵包安裝hadoop叢集的快速部署工具.

本文是因為配置kerberos 授權的時候, 需要加安裝一些功能, 比如tez的時候, 某個包(pig 安裝失敗,) 導致禁用kerberos 無效.
進而陷入死迴圈不得不重灌. 因為是物理機沒有回滾機制. 所以記錄下重灌的步驟.

我這裡因為是叢集, 所以需要配置centos7的ambari, HDP和HDP-UTILS的本地源,
簡單寫一下. 找一臺國外的速度快的centos7的機器,

yum install yum-utils createrepo yum-plugin-priorities
cd /etc/yum.repos
 
.d/
wget repo_file
    wget http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.2.1.0/ambari.repo
        http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.2.1.0/ambari-2.2.1.0-centos7.tar.gz
    wget http://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.4.0.0/hdp.repo
        http://public-repo-1.
 
hortonworks.com/HDP/centos7/2.x/updates/2.4.0.0/HDP-2.4.0.0-centos7-rpm.tar.gz
        http://public-repo-1.hortonworks.com/HDP-UTILS-1.1.0.20/repos/centos7/HDP-UTILS-1.1.0.20-centos7.tar.gz
cd /tmp
mkdir ambari
mkdir hdp
reposync -r repo_soft_name
    reposync -r Updates-ambari-2.2.1.0
    reposync -r HDP-2.4.0.0
    reposync -r HDP-UTILS-1.1
 
.0.20
把包傳回本地,並解壓到某個目錄下, 然後安裝apache 或者nginx提供web伺服器功能的工具.
install apache or others web services
    Repository              Base URL 
    Ambari Base URL         http://<web.server>/ambari/<OS>/Updates-ambari-2.2.1.0
    HDP Base URL            http://<web.server>/hdp/<OS>/HDP-<latest.version>
    HDP-UTILS Base URL      http://<web.server>/hdp/<OS>/HDP-UTILS-<version>

建立repofile
createrepo filepath
    createrepo Updates-ambari-2.2.1.0
    createrepo HDP-2.4.0.0
    createrepo HDP-UTILS-1.1.0.20
編輯本地的repo.file, 增加三個對應的repofile,
分別是ambari.repo, HDP.repo, HDP-UTILS.repo
vim /etc/yum.repos.d/repo.file 
touch  ambari.repo HDP.repo HDP-UTILS.repo
分別加入下面的內容
    #VERSION_NUMBER=2.2.1.00

    [Updates-ambari-2.2.1.0]
    name=ambari-2.2.1.0 - Updates
    baseurl=http://<web.server>/ambari_repo_rpms/centos7/Updates-ambari-2.2.1.0
    gpgcheck=0
    gpgkey=http://public-repo-1.hortonworks.com/ambari/centos7/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
    enabled=1
    priority=1
    make gpgcheck=0


    [HDP-2.4]
    name=HDP-2.4
    baseurl=http://<web.server>/hdp_repo_rpms/centos7/HDP-2.4.0.0/

    path=/
    enabled=1
    gpgcheck=0


    [HDP-UTILS-1.1.0.20]
    name=HDP-UTILS-1.1.0.20
    baseurl=http://<web.server>/hdp_repo_rpms/centos7/HDP-UTILS-1.1.0.20/
    #baseurl=http://public-repo-1.hortonworks.com/HDP-UTILS-1.1.0.20/repos/centos7/

    path=/
    enabled=1
    gpgcheck=0

接下來yum clean metadata後就可以開始重新安裝了.

需要刪除掉以下的包

yum remove -y hadoop_* zookeeper* ranger* hbase_* ranger* hbase_* ambari-* hadoop_* zookeeper_* hbase* range* pig*  hive* tez* mysql-* bigtop-*  tuned-* ambari-* apache-maven* postgresql*

同時需要刪除對應的目錄和配置, 資料備份

cd /usr/lib/ 
rm -rf hadoop hbase zookeeper hcatalog hive ambari-* storm ams-hbase flume hadoop-* falcon* slider* pgsql*

cd /var/lib/
rm -rf ambari-* hadoop-* pgsql oozie* hive*  falcon* slider*

cd /var/log/ 
rm -rf hadoop hbase spark tuned ambari-* zookeeper hadoop-* hive* oozie* storm* kafka*  falcon* slider*
find ./ -type f | grep -E "[a-z]+-[0-9]+" | xargs rm

cd /etc/ 
rm -rf hadoop hbase hive* ambari-* spark tez tuned zookeeper maven* oozie* storm* ams-* hadoop-* falcon* slider*

rm -rf /hadoop/*

cd /usr/share
rm -rf apache-maven HDP-oozie maven-* falcon*

rm /usr/hdp
cd /usr/bin
rm -rf mvnyjp
ls -la | grep hdp | awk '{ print $9 }' | xargs rm

cd /home  #刪除對應的使用者目錄
rm -rf oozie mapred zookeeper storm yarn hive spark tez kafka hcat hdfs hbase ams ambari-* knox

cd /var/spool/mail
rm -rf ambari-* ams hadoop hbase hcat hdfs hive kafka knox mapred oozie  slider spark storm tez yarn zookeeper

cd /
rm -rf kafka-logs hadoop
cd /tmp
rm -rf hadoop* hsperfdata* Jetty* hbase* ambari* jetty* MIME* ehcache* oozie* hive 

cd /usr/lib/python2.6/site-packages
rm -rf ambari* resource_*
ps aux | grep ambari | awk '{ print NR=$2 }' | xargs kill -9

yum clean metadata
yum repolist


接下來刪除裡面對應的使用者和組.
vim /etc/passwd
vim /etc/group

然後就可以重啟下然後開始重新安裝了.