itl CA blog tor line cat pre PE atan

如何搭建配置centos虛擬機請參考《Kafka:ZK+Kafka+Spark Streaming集群環境搭建(一)VMW安裝四臺CentOS,並實現本機與它們能交互,虛擬機內部實現可以上網。》

如何安裝hadoop2.9.0請參考《Kafka:ZK+Kafka+Spark Streaming集群環境搭建(二)安裝hadoop2.9.0》

如何安裝spark2.2.1請參考《Kafka:ZK+Kafka+Spark Streaming集群環境搭建(三)安裝spark2.2.1》

如何安裝zookeeper-3.4.12請參考《Kafka:ZK+Kafka+Spark Streaming集群環境搭建(八)安裝zookeeper-3.4.12》

安裝kafka的服務器:

192.168.0.120      master
192.168.0.121      slave1
192.168.0.122      slave2
192.168.0.123      slave3

備註:只在slave1,slave2,slave3三個節店上安裝zookeeper,master節店不安裝(其實前邊hadoop中master不作為datanode節店,spark中master不作為worker節店)。

Kafka:ZK+Kafka+Spark Streaming集群環境搭建(九)安裝kafka_2.11-1.1.0