【圖文詳細 】Kafka訊息佇列——kafka 叢集部署
5.1、Kafka 初體驗
單機 Kafka 試玩 官網網址:http://kafka.apache.org/quickstart
中文官網:http://kafka.apachecn.org/quickstart.html
5.2、叢集部署的基本流程總結
1、下載安裝包
2、解壓安裝包到對應的目錄
3、修改配置檔案
4、分發安裝包
5、啟動叢集,進行驗證
5.3、叢集部署的基礎環境準備
1、安裝 JDK 1.8
2、安裝 zookeeper 叢集(也可以使用自帶 ZooKeeper)
5.4、Kafka 叢集詳細安裝
1、下載安裝包
在 windows 平臺,從官網下載:http://mirrors.hust.edu.cn/apache/kafka/1.1.0/
在 centos 平臺:wget http://mirrors.hust.edu.cn/apache/kafka/1.1.0/kafka_2.11-1.1.0.tgz
2、解壓安裝包到對應的目錄
[[email protected] ~]$ tar -zxvf kafka_2.11-1.1.0.tgz -C apps/
3、修改配置檔案
[[email protected] ~]$ cd /home/hadoop/apps/kafka_2.11-1.1.0/config
[[email protected] config]$ vi server.properties
修改以下內容
4、分發安裝包
[[email protected] apps]$ scp -r kafka_2.11-1.1.0/ hadoop02:$PWD
[[email protected] apps]$ scp -r kafka_2.11-1.1.0/ hadoop03:$PWD
[[email protected] apps]$ scp -r kafka_2.11-1.1.0/ hadoop04:$PWD
千萬注意:要修改$KAFKA_HOME/config/server.properties 檔案中的對應 broker 節點的資訊 主要是以下三個:
5、配置環境變數 vim ~/.bashrc 增加以下內容:
儲存退出 然後執行命令時生效:source ~/.bashrc
6、啟動叢集,進行驗證 啟動命令:
千萬注意:先啟動 zookeeper 叢集