kafka教程1(cdh 5.12 安裝 kafka)
阿新 • • 發佈:2019-02-16
線上下載啟用
進入安裝包管理,找到kafka,點選下載,下載好後點擊分配,然後點選啟用
啟用後如下
離線下載啟用
cd /opt/cloudera/csd
wget http://archive.cloudera.com/csds/kafka/KAFKA-1.2.0.jar
cd /opt/cloudera/parcel-repo
wget http://archive.cloudera.com/kafka/parcels/latest/KAFKA-3.0.0-1.3.0.0.p0.40-el7.parcel
wget http://archive.cloudera.com/kafka/parcels/latest/KAFKA-3.0 .0-1.3.0.0.p0.40-el7.parcel.sha1
wget http://archive.cloudera.com/kafka/parcels/latest/manifest.json
然後進入安裝包管理,先分配然後啟用
安裝
1.新增服務
2.選擇kafka
3.選擇要新增broker
4.後面一直按照預設繼續下去,直到新增成功,然後再啟動
啟動的時候我曾經不知為什麼只能啟動一個broker,後來在下圖這裡啟動就全部都啟動了
也有可能是配置的問題,配置我也修改過一個,這裡就不驗證了
一些基本概念
這裡簡單介紹下概念,後面有有寫一篇部落格專門介紹kafka重要的概念
- topic:訊息依據topic進行分類
- producer:生產者
- consumer:消費者
- broker:kafka的單個服務
- zookeeper:儲存元資料