1. 程式人生 > >【圖文詳細 】Kafka訊息佇列——kafka 叢集部署

【圖文詳細 】Kafka訊息佇列——kafka 叢集部署

5.1、Kafka 初體驗 

單機 Kafka 試玩 官網網址:http://kafka.apache.org/quickstart

中文官網:http://kafka.apachecn.org/quickstart.html 

5.2、叢集部署的基本流程總結 

1、下載安裝包

2、解壓安裝包到對應的目錄

3、修改配置檔案

4、分發安裝包

5、啟動叢集,進行驗證 

5.3、叢集部署的基礎環境準備 

1、安裝 JDK 1.8

2、安裝 zookeeper 叢集(也可以使用自帶 ZooKeeper) 

5.4、Kafka 叢集詳細安裝 

1、下載安裝包

在 windows 平臺,從官網下載:http://mirrors.hust.edu.cn/apache/kafka/1.1.0/

在 centos 平臺:wget http://mirrors.hust.edu.cn/apache/kafka/1.1.0/kafka_2.11-1.1.0.tgz 

2、解壓安裝包到對應的目錄

[[email protected] ~]$ tar -zxvf kafka_2.11-1.1.0.tgz  -C apps/ 
 
3、修改配置檔案

[[email protected] ~]$ cd /home/hadoop/apps/kafka_2.11-1.1.0/config

[[email protected] config]$ vi server.properties

修改以下內容

4、分發安裝包

[[email protected] apps]$ scp -r kafka_2.11-1.1.0/ hadoop02:$PWD

[[email protected] apps]$ scp -r kafka_2.11-1.1.0/ hadoop03:$PWD

[[email protected] apps]$ scp -r kafka_2.11-1.1.0/ hadoop04:$PWD 
 
千萬注意:要修改$KAFKA_HOME/config/server.properties 檔案中的對應 broker 節點的資訊 主要是以下三個: 

5、配置環境變數 vim ~/.bashrc 增加以下內容: 

儲存退出 然後執行命令時生效:source ~/.bashrc 
 
6、啟動叢集,進行驗證 啟動命令:

千萬注意:先啟動 zookeeper 叢集