kafka-2安裝實戰篇
了解好kafka的基礎概念之後,可以開始動手,
環境:centos7,
官方教程
http://kafka.apache.org/quickstart#quickstart_download
安裝java環境,安裝jdk(推薦,也省事)
Centos :
yum -y update
yum -y install java
Ubuntu :
sudo apt-get update
sudo apt-get install java
或者也可以通過源碼手動安裝(如果上面的執行了,這一步到重啟環境變量,可以直接跳過了)
http://download.oracle.com/otn-pub/java/jdk/8u131-b11/d54c1d3a095b4ff2b6607d096fa80163/jdk-8u131-linux-x64.tar.gz
tar zxvf jdk-8u65-linux-x64.tar.gz
mv jdk1.8.0_65 java
mv java /java
#設置環境變量,生效
vi .bash_profile
JAVA_HOME=/java
PATH=$PATH:$JAVA_HOME/bin
export JAVA_HOME PATH
#重新啟動環境變量,使配置生效
source .bash_profile
下載kafka
https://www.apache.org/dyn/closer.cgi?path=/kafka/0.10.2.0/kafka_2.11-0.10.2.0.tgz
> tar -xzf kafka_2.11-0.10.2.0.tgz
> cd kafka_2.11-0.10.2.0
啟動zookeeper服務
bin/zookeeper-server-start.sh -daemon config/zookeeper.properties
#可以通過ps aux | grep zookeeper
查看起來沒有
#編輯kafka配置變量,幾個重要的設置
vim config/server.properties num.partitions = 10 #設置partitions數量,在客戶端消費時指定多少個線程並發 listeners=PLAINTEXT://192.168.1.200:9092 #設置本機的監聽ip及端口,如果為127.0.0.1那從其他機器上將連接不了,需要把192.168.1.200(我的ip)設置成你自己本機的真實ip #設置日誌的保存時間,是按byt保存還是按照時間,超過的會自動刪除 log.retention.bytes=1073741824 log.retention.hours=168 zookeeper.connect=localhost:2181#本地監聽的zookeeper端口,默認即可
啟動kafka
bin/kafka-server-start.sh config/server.properties
vim /etc/iptables.startup
#增加
-A KAFKA -p tcp -m tcp --dport 10050 -j ACCEPT
#重啟,生效
iptables-restore < /etc/iptables.startup
#查看list
iptables -L
#設置完成後在本地telnet下本機的10050通麽,通的話再從其他機器telnet測試下
#如果需要重啟kafka或者zookeeper,執行下面kill命令,再重新執行上面啟動命令就可以了
ps -ef | grep kafka |awk ‘{print $2}‘|xargs kill -9
本文出自 “馬鵬飛——著” 博客,請務必保留此出處http://mapengfei.blog.51cto.com/1552412/1926065
kafka-2安裝實戰篇