1. 程式人生 > >kafka教程1(cdh 5.12 安裝 kafka)

kafka教程1(cdh 5.12 安裝 kafka)

線上下載啟用

進入安裝包管理,找到kafka,點選下載,下載好後點擊分配,然後點選啟用
這裡寫圖片描述

啟用後如下
這裡寫圖片描述

離線下載啟用

cd /opt/cloudera/csd
wget http://archive.cloudera.com/csds/kafka/KAFKA-1.2.0.jar

cd /opt/cloudera/parcel-repo
wget http://archive.cloudera.com/kafka/parcels/latest/KAFKA-3.0.0-1.3.0.0.p0.40-el7.parcel
wget http://archive.cloudera.com/kafka/parcels/latest/KAFKA-3.0
.0-1.3.0.0.p0.40-el7.parcel.sha1 wget http://archive.cloudera.com/kafka/parcels/latest/manifest.json

然後進入安裝包管理,先分配然後啟用

安裝

  • 1.新增服務
    這裡寫圖片描述

  • 2.選擇kafka
    這裡寫圖片描述

  • 3.選擇要新增broker
    這裡寫圖片描述

  • 4.後面一直按照預設繼續下去,直到新增成功,然後再啟動
    啟動的時候我曾經不知為什麼只能啟動一個broker,後來在下圖這裡啟動就全部都啟動了
    這裡寫圖片描述
    也有可能是配置的問題,配置我也修改過一個,這裡就不驗證了

一些基本概念

這裡簡單介紹下概念,後面有有寫一篇部落格專門介紹kafka重要的概念

  • topic:訊息依據topic進行分類
  • producer:生產者
  • consumer:消費者
  • broker:kafka的單個服務
  • zookeeper:儲存元資料