CDH5.14.X安裝Kafka過程(Kafka版本選擇的過程)
阿新 • • 發佈:2019-01-11
CDH5.14安裝Kafka過程:
在CDH官網中關於Kafka的安裝和升級中已經說到,在CDH中,Kafka作為一個分散式的parcel,單獨出來作為parcel分發安裝包。只要我們把分離開的kafka的服務描述jar包和服務parcel包下載了,就可以實現完美集成了。
注意整合之前請閱讀官方文件,特別是版本支援方面。
檢視kafka與CDH版本對應:
https://www.cloudera.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html#pcm_kafka
我的CDH是5.14的所以選擇3.1的版本。
到:http://archive.cloudera.com/kafka/parcels/latest/
這個網址下載你需要的kafka的parcel版本。我的虛擬機器是Centos7的,下載對應的版本,其版本對應如下
EL is short for Red Hat Enterprise Linux (EL). EL6 is the download for Red Hat 6.x, CentOS 6.x, and CloudLinux 6.x. EL5 is the download for Red Hat 5.x, CentOS 5.x, CloudLinux 5.x. EL7 is the download for Red Hat 7.x, CentOS 7.x, and CloudLinux 7.x. The UNIXy Varnish Plugins run on all the above platforms. |
開啟manifest.json
找到這個hash值,將其複製到.sha 檔案中去,替換掉原來的hash值。
然後將這三個檔案,拷貝到parcel-repo目錄下。如果有相同的檔案,即manifest.json,只需將之前的重新命名即可。
2:下載Kafka-1.2.0.jar
網址:http://archive.cloudera.com/csds/kafka/
上傳CSD包KAFKA-1.2.0.jar,到伺服器CDH目錄下,路徑為/opt/cloudera/csd。
3:
點選繼續時候,讓你install kafka 的parcel,點進去,檢查更新parcel,分配,啟用。
配置完成!!