1. 程式人生 > >kafka1.0.0集群搭建

kafka1.0.0集群搭建

kafka zookeeper

一、環境準備
1、軟件
zookeeper3.4.11 https://www.apache.org/dyn/closer.cgi?path=/kafka/1.0.0/kafka_2.11-1.0.0.tgz
kafka1.0.0 http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.11/
java8 http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
2、硬件
? 機器:10.205.104.55
? 機器:10.205.102.52
? 機器:10.205.105.33
二、安裝
jdk安裝略
1、統一目錄/opt
技術分享圖片
2、安裝zookeeper(三臺機器同樣操作)
cp conf/zoo_sample.cfg zoo.cfg
grep ^[^#] conf/zoo.cfg
技術分享圖片
添加機器id到 dataDir=/opt/zookeeper-3.4.11/data目錄下的myid文件中
機器:10.205.104.55 ==1
機器:10.205.102.52 ==2
機器:10.205.105.33 ==3
技術分享圖片
每臺機器都是同樣的配置
啟動zookeeper
bin/zkServer.sh start
檢驗
技術分享圖片
3、安裝kafka(每臺機器broker.id不同。這裏依此是0,1,2)
每臺機器依此配置
技術分享圖片
啟動kafka(每臺都啟動)
bin/kafka-server-start.sh config/server-1.properties &
校驗
技術分享圖片
創建topic
bin/kafka-topics.sh --create --zookeeper 10.205.104.55:2181 --replication-factor 3 --partitions 1 --topic my-replicated-topic
查看topic信息
bin/kafka-topics.sh --describe --zookeeper 10.205.104.55:2181 --topic my-replicated-topic
技術分享圖片
推送信息
bin/kafka-console-producer.sh --broker-list 10.205.104.55:9092 --topic my-replicated-topic
消費信息
bin/kafka-console-consumer.sh --bootstrap-server 10.205.104.55:9092 --from-beginning --topic my-replicated-topic
安裝完畢

kafka1.0.0集群搭建