1. 程式人生 > 實用技巧 >windows環境下搭建kafka

windows環境下搭建kafka

注意:請確保本地Java環境變數配置成功

安裝Zookeeper

Kafka的執行依賴於Zookeeper,所以在執行Kafka之前我們需要安裝並執行Zookeeper

  1. 下載安裝檔案:http://mirror.bit.edu.cn/apache/zookeeper/
  2. 解壓檔案(本文解壓到 E:\zookeeper-3.4.8)
  3. 開啟E:\zookeeper-3.4.8\conf,把zoo_sample.cfg重新命名成zoo.cfg
  4. 從文字編輯器裡開啟zoo.cfg
  5. 修改dataDir和dataLogDir儲存路徑
    dataDir=E:\data\logs\zookeeper
    dataLogDir=E:\data\logs\zookeeper
  6. 新增如下系統變數:ZOOKEEPER_HOME: E:\zookeeper-3.4.8
    Path: 在現有的值後面新增;%ZOOKEEPER_HOME%\bin;
  7. 執行Zookeeper: 開啟cmd然後執行zkserver命令。如果列印以下資訊則表示zookeeper已經安裝成功並執行在2181埠。

安裝並執行Kafka

  1. 下載安裝檔案:http://kafka.apache.org/downloads.html
  2. 解壓檔案(本文解壓到 E:\kafka_2.11-2.0.0)
  3. 開啟E:\kafka_2.11-2.0.0\config\ server.properties
  4. 把 log.dirs的值改成 log.dirs=E:\data\logs\kafka
  5. E:\kafka_2.11-2.0.0\bin資料夾下的.sh命令指令碼是在shell下執行的,此資料夾下還有個 windows資料夾,裡面是windows下執行的.bat命令指令碼
  6. 在E:\kafka_2.11-2.0.0資料夾中”Shift+滑鼠右鍵”點選空白處開啟命令提示視窗
  7. 輸入並執行一下命令以開啟kafka:
    .\bin\windows\kafka-server-start.bat .\config\server.properties

建立topics

  1. 在E:\kafka_2.11-2.0.0\bin\windows資料夾中”Shift+滑鼠右鍵”點選空白處開啟命令提示視窗

    以下建立一個名為test的topic:

    kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

  2. 檢視topics,這裡只是檢視一下是否建立成功,也可以不用檢視topic,直接跳過不做此操作:
    kafka-topics.bat --describe --zookeeper localhost:2181 --topic test

Producer

在E:\kafka_2.11-2.0.0\bin\windows資料夾中”Shift+滑鼠右鍵”點選空白處開啟命令提示視窗

kafka-console-producer.bat --broker-list localhost:9092 --topic test

Consumer

在E:\kafka_2.11-2.0.0\bin\windows資料夾中”Shift+滑鼠右鍵”點選空白處開啟命令提示視窗

kafka-console-consumer.bat --zookeeper localhost:2181 --topic test

如果下載的kafka是較新的版本,Consumer使用如下的命令:

kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test