Docker部署RocketMQ
搜尋映象
- 可以選擇在官方網站 hub.docker.com 上搜索映象;
- 或者在命令列介面中執行命令
docker search rocketmq
搜尋映象;
以下表格是排名靠前的映象對比:
映象名稱 | 下載量Downloads | 收藏數Stars | 最後維護時間 | 說明文件 |
---|---|---|---|---|
foxiswho/rocketmq | 500K+ | 54 | 7個月前 | 有文件 |
rocketmqinc/rocketmq | 100K+ | 51 | 2年前 | 無文件 |
沒有官方的映象,看起來 foxiswho/rocketmq
總體認可度較高,就決定使用這個映象。
下載映象
在命令列介面中執行以下命令:
docker pull foxiswho/rocketmq
下載完成後,可以繼續在命令列介面執行 docker images
命令檢視映象是否下載成功。當前的最新版本是 4.8.0
如果使用控制檯功能,可以下載另一個映象 styletang/rocketmq-console-ng:
docker pull styletang/rocketmq-console-ng
docker-compose.yml
version: '3.5' services: rmqnamesrv: image: foxiswho/rocketmq container_name: rmqnamesrv ports: - 9876:9876 volumes: - ./data/logs:/opt/logs - ./data/store:/opt/store command: sh mqnamesrv networks: rmq: aliases: - rmqnamesrv rmqbroker: image: foxiswho/rocketmq container_name: rmqbroker ports: - 10909:10909 - 10911:10911 volumes: - ./data/logs:/opt/logs - ./data/store:/opt/store - ./data/brokerconf/broker.conf:/etc/rocketmq/broker.conf environment: NAMESRV_ADDR: "rmqnamesrv:9876" JAVA_OPTS: " -Duser.home=/opt" JAVA_OPT_EXT: "-server -Xms128m -Xmx128m -Xmn128m" command: sh mqbroker -c /etc/rocketmq/broker.conf depends_on: - rmqnamesrv networks: rmq: aliases: - rmqbroker rmqconsole: image: styletang/rocketmq-console-ng container_name: rmqconsole ports: - 8080:8080 environment: JAVA_OPTS: "-Drocketmq.namesrv.addr=rmqnamesrv:9876 -Dcom.rocketmq.sendMessageWithVIPChannel=false" depends_on: - rmqnamesrv networks: rmq: aliases: - rmqconsole networks: rmq: name: rmq driver: bridge
注意本文中的檔案有所改動,4.7.0 及以後 版本映象 將 不在根據base映象生成 server,broker 映象,統一使用 base 映象,兩者區別只是呼叫的 啟動檔案不同。
所以, 啟動容器 rmqnamesrv 對應 command: sh mqnamesrv
;啟動容器 rmqbroker 對應 command: sh mqbroker -c /etc/rocketmq/broker.conf
;
嘗試執行
此時,我們在命令列介面,執行以下命令(注意當前命令列工作目錄應該是 docker-compose.yml 檔案所在目錄)
docker-compose up -d
比如我的命令行當前工作目錄是
F:\Docker\rocketmq
但是,我執行 docker ps
時,發現只有 rmqconsole 正常啟動,而 rmqnamesrv 和 rmqbroker 啟動失敗了。
F:\Docker\rocketmq> docker logs rmqbroker
java.io.FileNotFoundException: /etc/rocketmq/broker.conf (Is a directory)
at java.io.FileInputStream.open0(Native Method)
at java.io.FileInputStream.open(FileInputStream.java:195)
at java.io.FileInputStream.<init>(FileInputStream.java:138)
at java.io.FileInputStream.<init>(FileInputStream.java:93)
at org.apache.rocketmq.broker.BrokerStartup.createBrokerController(BrokerStartup.java:128)
at org.apache.rocketmq.broker.BrokerStartup.main(BrokerStartup.java:58)
java.io.FileNotFoundException: /etc/rocketmq/broker.conf (Is a directory)
at java.io.FileInputStream.open0(Native Method)
at java.io.FileInputStream.open(FileInputStream.java:195)
at java.io.FileInputStream.<init>(FileInputStream.java:138)
at java.io.FileInputStream.<init>(FileInputStream.java:93)
at org.apache.rocketmq.broker.BrokerStartup.createBrokerController(BrokerStartup.java:128)
at org.apache.rocketmq.broker.BrokerStartup.main(BrokerStartup.java:58)
在本例中,Windows 宿主機的 F:\Docker\rocketmq\data\brokerconf\broker.conf
對應容器中的 /etc/rocketmq/broker.conf
,但是問題是:現在前者是個資料夾,而不是檔案。
broker.conf
RocketMQ Broker 需要一個配置檔案,按照上面的 Compose 配置,我們需要在 ./data/brokerconf/
目錄下建立一個名為 broker.conf 的配置檔案,內容如下:
# Licensed to the Apache Software Foundation (ASF) under one or more
# contributor license agreements. See the NOTICE file distributed with
# this work for additional information regarding copyright ownership.
# The ASF licenses this file to You under the Apache License, Version 2.0
# (the "License"); you may not use this file except in compliance with
# the License. You may obtain a copy of the License at
#
# http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing, software
# distributed under the License is distributed on an "AS IS" BASIS,
# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
# See the License for the specific language governing permissions and
# limitations under the License.
# 所屬叢集名字
brokerClusterName=DefaultCluster
# broker 名字,注意此處不同的配置檔案填寫的不一樣,如果在 broker-a.properties 使用: broker-a,
# 在 broker-b.properties 使用: broker-b
brokerName=broker-a
# 0 表示 Master,> 0 表示 Slave
brokerId=0
# nameServer地址,分號分割
# namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876
# 啟動IP,如果 docker 報 com.alibaba.rocketmq.remoting.exception.RemotingConnectException: connect to <192.168.0.120:10909> failed
# 解決方式1 加上一句 producer.setVipChannelEnabled(false);,解決方式2 brokerIP1 設定宿主機IP,不要使用docker 內部IP
# brokerIP1=192.168.0.253
# 在傳送訊息時,自動建立伺服器不存在的topic,預設建立的佇列數
defaultTopicQueueNums=4
# 是否允許 Broker 自動建立 Topic,建議線下開啟,線上關閉 !!!這裡仔細看是 false,false,false
autoCreateTopicEnable=true
# 是否允許 Broker 自動建立訂閱組,建議線下開啟,線上關閉
autoCreateSubscriptionGroup=true
# Broker 對外服務的監聽埠
listenPort=10911
# 刪除檔案時間點,預設凌晨4點
deleteWhen=04
# 檔案保留時間,預設48小時
fileReservedTime=120
# commitLog 每個檔案的大小預設1G
mapedFileSizeCommitLog=1073741824
# ConsumeQueue 每個檔案預設存 30W 條,根據業務情況調整
mapedFileSizeConsumeQueue=300000
# destroyMapedFileIntervalForcibly=120000
# redeleteHangedFileInterval=120000
# 檢測物理檔案磁碟空間
diskMaxUsedSpaceRatio=88
# 儲存路徑
# storePathRootDir=/home/ztztdata/rocketmq-all-4.1.0-incubating/store
# commitLog 儲存路徑
# storePathCommitLog=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/commitlog
# 消費佇列儲存
# storePathConsumeQueue=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/consumequeue
# 訊息索引儲存路徑
# storePathIndex=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/index
# checkpoint 檔案儲存路徑
# storeCheckpoint=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/checkpoint
# abort 檔案儲存路徑
# abortFile=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/abort
# 限制的訊息大小
maxMessageSize=65536
# flushCommitLogLeastPages=4
# flushConsumeQueueLeastPages=2
# flushCommitLogThoroughInterval=10000
# flushConsumeQueueThoroughInterval=60000
# Broker 的角色
# - ASYNC_MASTER 非同步複製Master
# - SYNC_MASTER 同步雙寫Master
# - SLAVE
brokerRole=ASYNC_MASTER
# 刷盤方式
# - ASYNC_FLUSH 非同步刷盤
# - SYNC_FLUSH 同步刷盤
flushDiskType=ASYNC_FLUSH
# 發訊息執行緒池數量
# sendMessageThreadPoolNums=128
# 拉訊息執行緒池數量
# pullMessageThreadPoolNums=128
訪問控制檯
接著,我在宿主機上訪問 http://localhost:8080
就可以登入控制檯了。