1. 程式人生 > 其它 >Docker部署RocketMQ

Docker部署RocketMQ

搜尋映象

  • 可以選擇在官方網站 hub.docker.com 上搜索映象;
  • 或者在命令列介面中執行命令 docker search rocketmq 搜尋映象;

以下表格是排名靠前的映象對比:

映象名稱 下載量Downloads 收藏數Stars 最後維護時間 說明文件
foxiswho/rocketmq 500K+ 54 7個月前 有文件
rocketmqinc/rocketmq 100K+ 51 2年前 無文件

沒有官方的映象,看起來 foxiswho/rocketmq 總體認可度較高,就決定使用這個映象。

下載映象

在命令列介面中執行以下命令:

docker pull foxiswho/rocketmq

下載完成後,可以繼續在命令列介面執行 docker images 命令檢視映象是否下載成功。當前的最新版本是 4.8.0

如果使用控制檯功能,可以下載另一個映象 styletang/rocketmq-console-ng

docker pull styletang/rocketmq-console-ng

docker-compose.yml

version: '3.5'
services:
  rmqnamesrv:
    image: foxiswho/rocketmq
    container_name: rmqnamesrv
    ports:
      - 9876:9876
    volumes:
      - ./data/logs:/opt/logs
      - ./data/store:/opt/store
    command: sh mqnamesrv
    networks:
        rmq:
          aliases:
            - rmqnamesrv

  rmqbroker:
    image: foxiswho/rocketmq
    container_name: rmqbroker
    ports:
      - 10909:10909
      - 10911:10911
    volumes:
      - ./data/logs:/opt/logs
      - ./data/store:/opt/store
      - ./data/brokerconf/broker.conf:/etc/rocketmq/broker.conf
    environment:
        NAMESRV_ADDR: "rmqnamesrv:9876"
        JAVA_OPTS: " -Duser.home=/opt"
        JAVA_OPT_EXT: "-server -Xms128m -Xmx128m -Xmn128m"
    command: sh mqbroker -c /etc/rocketmq/broker.conf
    depends_on:
      - rmqnamesrv
    networks:
      rmq:
        aliases:
          - rmqbroker

  rmqconsole:
    image: styletang/rocketmq-console-ng
    container_name: rmqconsole
    ports:
      - 8080:8080
    environment:
        JAVA_OPTS: "-Drocketmq.namesrv.addr=rmqnamesrv:9876 -Dcom.rocketmq.sendMessageWithVIPChannel=false"
    depends_on:
      - rmqnamesrv
    networks:
      rmq:
        aliases:
          - rmqconsole

networks:
  rmq:
    name: rmq
    driver: bridge

參考自《基於 Docker 安裝 RocketMQ》

注意本文中的檔案有所改動,4.7.0 及以後 版本映象 將 不在根據base映象生成 server,broker 映象,統一使用 base 映象,兩者區別只是呼叫的 啟動檔案不同。
所以, 啟動容器 rmqnamesrv 對應 command: sh mqnamesrv;啟動容器 rmqbroker 對應 command: sh mqbroker -c /etc/rocketmq/broker.conf

嘗試執行

此時,我們在命令列介面,執行以下命令(注意當前命令列工作目錄應該是 docker-compose.yml 檔案所在目錄)

docker-compose up -d

比如我的命令行當前工作目錄是 F:\Docker\rocketmq

但是,我執行 docker ps 時,發現只有 rmqconsole 正常啟動,而 rmqnamesrvrmqbroker 啟動失敗了。

F:\Docker\rocketmq> docker logs rmqbroker
java.io.FileNotFoundException: /etc/rocketmq/broker.conf (Is a directory)
        at java.io.FileInputStream.open0(Native Method)
        at java.io.FileInputStream.open(FileInputStream.java:195)
        at java.io.FileInputStream.<init>(FileInputStream.java:138)
        at java.io.FileInputStream.<init>(FileInputStream.java:93)
        at org.apache.rocketmq.broker.BrokerStartup.createBrokerController(BrokerStartup.java:128)
        at org.apache.rocketmq.broker.BrokerStartup.main(BrokerStartup.java:58)
java.io.FileNotFoundException: /etc/rocketmq/broker.conf (Is a directory)
        at java.io.FileInputStream.open0(Native Method)
        at java.io.FileInputStream.open(FileInputStream.java:195)
        at java.io.FileInputStream.<init>(FileInputStream.java:138)
        at java.io.FileInputStream.<init>(FileInputStream.java:93)
        at org.apache.rocketmq.broker.BrokerStartup.createBrokerController(BrokerStartup.java:128)
        at org.apache.rocketmq.broker.BrokerStartup.main(BrokerStartup.java:58)

在本例中,Windows 宿主機的 F:\Docker\rocketmq\data\brokerconf\broker.conf 對應容器中的 /etc/rocketmq/broker.conf,但是問題是:現在前者是個資料夾,而不是檔案。

broker.conf

RocketMQ Broker 需要一個配置檔案,按照上面的 Compose 配置,我們需要在 ./data/brokerconf/ 目錄下建立一個名為 broker.conf 的配置檔案,內容如下:

# Licensed to the Apache Software Foundation (ASF) under one or more
# contributor license agreements.  See the NOTICE file distributed with
# this work for additional information regarding copyright ownership.
# The ASF licenses this file to You under the Apache License, Version 2.0
# (the "License"); you may not use this file except in compliance with
# the License.  You may obtain a copy of the License at
#
#     http://www.apache.org/licenses/LICENSE-2.0
#
#  Unless required by applicable law or agreed to in writing, software
#  distributed under the License is distributed on an "AS IS" BASIS,
#  WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
#  See the License for the specific language governing permissions and
#  limitations under the License.


# 所屬叢集名字
brokerClusterName=DefaultCluster

# broker 名字,注意此處不同的配置檔案填寫的不一樣,如果在 broker-a.properties 使用: broker-a,
# 在 broker-b.properties 使用: broker-b
brokerName=broker-a

# 0 表示 Master,> 0 表示 Slave
brokerId=0

# nameServer地址,分號分割
# namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876

# 啟動IP,如果 docker 報 com.alibaba.rocketmq.remoting.exception.RemotingConnectException: connect to <192.168.0.120:10909> failed
# 解決方式1 加上一句 producer.setVipChannelEnabled(false);,解決方式2 brokerIP1 設定宿主機IP,不要使用docker 內部IP
# brokerIP1=192.168.0.253

# 在傳送訊息時,自動建立伺服器不存在的topic,預設建立的佇列數
defaultTopicQueueNums=4

# 是否允許 Broker 自動建立 Topic,建議線下開啟,線上關閉 !!!這裡仔細看是 false,false,false
autoCreateTopicEnable=true

# 是否允許 Broker 自動建立訂閱組,建議線下開啟,線上關閉
autoCreateSubscriptionGroup=true

# Broker 對外服務的監聽埠
listenPort=10911

# 刪除檔案時間點,預設凌晨4點
deleteWhen=04

# 檔案保留時間,預設48小時
fileReservedTime=120

# commitLog 每個檔案的大小預設1G
mapedFileSizeCommitLog=1073741824

# ConsumeQueue 每個檔案預設存 30W 條,根據業務情況調整
mapedFileSizeConsumeQueue=300000

# destroyMapedFileIntervalForcibly=120000
# redeleteHangedFileInterval=120000
# 檢測物理檔案磁碟空間
diskMaxUsedSpaceRatio=88
# 儲存路徑
# storePathRootDir=/home/ztztdata/rocketmq-all-4.1.0-incubating/store
# commitLog 儲存路徑
# storePathCommitLog=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/commitlog
# 消費佇列儲存
# storePathConsumeQueue=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/consumequeue
# 訊息索引儲存路徑
# storePathIndex=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/index
# checkpoint 檔案儲存路徑
# storeCheckpoint=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/checkpoint
# abort 檔案儲存路徑
# abortFile=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/abort
# 限制的訊息大小
maxMessageSize=65536

# flushCommitLogLeastPages=4
# flushConsumeQueueLeastPages=2
# flushCommitLogThoroughInterval=10000
# flushConsumeQueueThoroughInterval=60000

# Broker 的角色
# - ASYNC_MASTER 非同步複製Master
# - SYNC_MASTER 同步雙寫Master
# - SLAVE
brokerRole=ASYNC_MASTER

# 刷盤方式
# - ASYNC_FLUSH 非同步刷盤
# - SYNC_FLUSH 同步刷盤
flushDiskType=ASYNC_FLUSH

# 發訊息執行緒池數量
# sendMessageThreadPoolNums=128
# 拉訊息執行緒池數量
# pullMessageThreadPoolNums=128

訪問控制檯

接著,我在宿主機上訪問 http://localhost:8080 就可以登入控制檯了。