1. 程式人生 > >Windows平臺kafka環境的搭建

Windows平臺kafka環境的搭建

注意:請確保本地Java環境變數配置成功

1.安裝Zookeeper
Kafka的執行依賴於Zookeeper,所以在執行Kafka之前我們需要安裝並執行Zookeeper
1.1 下載安裝檔案: http://mirror.bit.edu.cn/apache/zookeeper/
1.2 解壓檔案(本文解壓到 D:\zookeeper-3.4.8)
1.3 開啟D:\zookeeper-3.4.8\conf,把zoo_sample.cfg重新命名成zoo.cfg
1.4 從文字編輯器裡開啟zoo.cfg
1.5 修改dataDir和dataLogDir儲存路徑
dataDir=D:\data\logs\zookeeper
dataLogDir=D:\data\logs\zookeeper
1.6 新增如下系統變數:ZOOKEEPER_HOME: D:\zookeeper-3.4.8


Path: 在現有的值後面新增 ;%ZOOKEEPER_HOME%\bin;
1.7 執行Zookeeper: 開啟cmd然後執行zkserver 命令。如果列印以下資訊則表示zookeeper已經安裝成功並執行在2181埠。
這裡寫圖片描述

2.安裝並執行Kafka
2.1 下載安裝檔案: http://kafka.apache.org/downloads.html
2.2 解壓檔案(本文解壓到 D:\kafka_2.11-0.10.2.0)
2.3 開啟D:\kafka_2.11-0.10.2.0\config\ server.properties
2.4 把 log.dirs的值改成 log.dirs=D:\data\logs\kafka
2.5 D:\kafka_2.11-0.10.2.0\bin資料夾下的.sh命令指令碼是在shell下執行的,此資料夾下還有個 windows資料夾,裡面是windows下執行的.bat命令指令碼
2.6 在D:\kafka_2.11-0.10.2.0資料夾中”Shift+滑鼠右鍵”點選空白處開啟命令提示視窗
2.7 輸入並執行一下命令以開啟kafka:

.\bin\windows\kafka-server-start.bat .\config\server.properties

顯示的資訊如下,則表示正常執行
這裡寫圖片描述

3.建立topics
3.1在D:\kafka_2.11-0.10.2.0\bin\windows資料夾中”Shift+滑鼠右鍵”點選空白處開啟命令提示視窗

kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

4.開啟一個Producer
4.1在D:\kafka_2.11-0.10.2.0\bin\windows資料夾中”Shift+滑鼠右鍵”點選空白處開啟命令提示視窗

kafka-console-producer.bat --broker-list localhost:9092 --topic test

5.開啟一個Consumer
5.1在D:\kafka_2.11-0.10.2.0\bin\windows資料夾中”Shift+滑鼠右鍵”點選空白處開啟命令提示視窗

kafka-console-consumer.bat --zookeeper localhost:2181 --topic test

注意:以上開啟的視窗不要關閉
然後就可以在Producer控制檯視窗輸入訊息了。在訊息輸入過後,很快Consumer視窗就會顯示出Producer傳送的訊息:
這裡寫圖片描述

相關推薦

Windows平臺kafka環境搭建

注意:請確保本地Java環境變數配置成功 1.安裝Zookeeper Kafka的執行依賴於Zookeeper,所以在執行Kafka之前我們需要安裝並執行Zookeeper 1.

Windows平臺kafka單機環境搭建

在安裝zookeeper前,請確認java環境已經正確安裝和配置JAVA_HOME環境變數。否則無法啟動zookeeper和kafka的。 1.安裝Zookeeper  Kafka的執行依賴於Zookeeper,所以在執行Kafka之前我們需要安裝並執行Zookeepe

Windows下深度學習平臺Keras環境搭建【CPU版】

系統:Windows8.1 CPU:Intel Core i5-5200U 電腦為筆者的自己的膝上型電腦,原來是想搭個Windows下的Python環境,後來因為需要一併將Windows下的CPU版本Keras也搭建完成。Windows下CPU版本的Keras以熟悉Kera

kafka環境搭建Windows/Linux)

(一)安裝zookeeper(windows) kafka需要用到zookeeper,所以需要先安裝zookeeper 1.到官網下載最新版zookeeper,http://www.apache.org/dyn/closer.cgi/zookeeper/ 2.解壓到你喜歡的

React-Native 學習筆記-Android開發平臺-開發環境搭建

環境變量 最新版 下載 and 系統 系統環境變量 新版本 開發環境 studio 詳細步驟請查看官網對應文檔,BUT,有些註意事項請註意! 1,優先安裝Node.js,因為後面可以使用npm安裝軟件, 2,註意不要使用CNPM!!!!!!!!! 3,Android

windows下reactnative環境搭建

windows下reactnative環安裝python2 安裝nodejs 安裝android-studio 安裝jdk8 設置ANDROID_HOME環境變量 把Android SDK中的tools和platform-tools目錄添加到環境變量中 設置JAVA_HOME環境變量 打開andorid-st

移動端自動化測試-Windows-Android-Appium環境搭建

tar pan 自己的 需要 clas java 三星手機 根據 安裝jdk 第一步 安裝JDK,本機如果帶有1.7及以上版本的,則可忽略此安裝步驟。 JDK的安裝包,百度下載即可。安裝完成後配置環境變量。 cmd下java -version檢查環境變量是否配置成功。

Spark學習筆記--Spark在Windows下的環境搭建(轉)

最新版本 https ons console 步驟 新版本 用戶 ref sudo 一、JDK的安裝 1、1 下載JDK   首先需要安裝JDK,並且將環境變量配置好,如果已經安裝了的老司機可以忽略。JDK(全稱是JavaTM Platform Standard Editi

windows下testlink環境搭建

detail rec req rep phpAdmin test tab read 支持 安裝步驟 安裝MySQL 安裝PHP 安裝Apache 安裝TestLink 安裝Mysql 見wondows下安裝mysql 安裝PHP 下載PHP後解壓,將PHP的文件的地址添

Spark在Windows下的環境搭建

[] 特定 features 千萬 安裝目錄 standard har java test load 由於Spark是用Scala來寫的,所以Spark對Scala肯定是原生態支持的,因此這裏以Scala為主來介紹Spark環境的搭建,主要包括四個步驟,分別是:JDK的安裝

Linux系統下吉林快-三平臺開發環境搭建以及關於變量的基本操作

end 進行 相關操作 and 之前 超級用戶 oss 這樣的 常見 有問題聯系Q1446595067吉林快-三平臺開發, 是一種面向對象的解釋型計算機程序設計語言,由荷蘭人Guido van Rossum於1989年發明,第一個公開發行版發行於1991年。 Python是

windows下Python環境搭建

.org 時間 網速 安裝完成 psc code 不知道 程序 格式 Python是一個跨平臺、可移植的編程語言,因此可在windows、linux/unix和Mac os x系統中安裝使用。安裝完成後,你會得到Python解釋器環境,一個命令行交互環境,一個簡單的集成開發

移動端自動化==>Windows-Android-Appium環境搭建

信息 文件夾 studio 安卓軟件開發 form 安裝包 device android-s err 第一步 安裝JDK,本機如果帶有1.7及以上版本且配置好了環境變量,則可忽略此安裝步驟。 JDK的安裝包,百度下載即可。安裝完成後配置環境變量。 cmd下驗證環境變量是否配

windows go語言環境搭建

相應資源地址 go語言安裝包下載地址為 https://golang.org/dl/ go githup地址為 https://github.com/golang/go 使用的ide編譯器為 liteide 下載地址為 https://sourceforge.net/projects/l

windows10下Kafka環境搭建

內容小白,包含JDK+Zookeeper+Kafka三部分。 JDK: 1)   安裝包:Java SE Development Kit 9.0.1       下載地址:http://www.oracle.c

Linux/Windows下Python環境搭建步驟

一、Linux下Python環境搭建 一般情況下,Linux系統都已經預安裝好Python,但是版本都比較低,需要安裝新的版本方便使用。  下載地址:https://www.python.org/downloads/source/  1、上傳安裝檔案到Linux系統的/opt目錄下。

Windows下Python環境搭建圖解(3.6.2)

Windows下Python(pip)環境搭建(3.6)圖解 ----------------小白一隻,學習整理中。。。。轉載請標明,謝謝------------------------------------------- 1:下載最新的Python安裝:3.6.2

Go:windows下go環境搭建及IDE安裝過程

直接 mage download www 添加 系列 del 安裝包 目錄 /** * @Description windows下go環境搭建及IDE安裝過程 * @author ranx * @date 2018年11月23日 上午9:05:20 * */  一直都

Windows平臺Hadoop環境安裝配置

下載3個所需軟體 JDK安裝與環境變數配置 下載hadoop,建議使用國內源下載 ,比如:清華大學源 下載hadooponwindows-master.zip【**能支援在windows執行hadoop的工具】 安裝配置 這篇文章寫的比較好,簡單幾步

windows下sqoop環境搭建要正確安裝hadoop

一開始我是根據 Windows下部署HBase 的步驟進行安裝,裡面說把 HADOOP_HOME 設定成 hadoop-common-2.2.0-bin-master 的路徑上,這個暫時沒有問題,hbase 可以正常啟動。然後我打算導資料,就需要安裝 sqoop,根