docker搭建redis叢集
一.簡介
docker作為一個容器技術,在搭建資源隔離性服務上具有很大的優勢,在一臺伺服器上可以啟動多個docker容器,感覺每個在容器裡面部署的服務就像是部署在不同的伺服器上。此次基於docker以及docker-compose(一種容器編排技術)搭建redis叢集,包含六個例項,分為三主三從。
二.構建映象
使用docker構建容器,首先需要一個映象,這個映象可以基於docker官方提供的標準映象,也可以自定義映象。
1)構建redis映象檔案
建立Dockerfile檔案,內容如下
#指定基礎映象
FROM alpine
#指定下載源,使用阿里的源,可以加快下載速度。同時安裝編譯redis需要用到的命令
RUN sed -i 's/dl-cdn.alpinelinux.org/mirrors.aliyun.com/g' /etc/apk/repositories \
&& apk add gcc g++ libc-dev wget vim openssl-dev make linux-headers bash \
&& rm -rf /var/cache/apk/*
#通過選擇更小的映象,刪除不必要檔案清理不必要的安裝快取,從而瘦身映象
#建立相關目錄能夠看到日誌資訊跟資料跟配置檔案
RUN mkdir -p /usr/src/redis \
&& mkdir -p /usr/src/redis/data \
&& mkdir -p /usr/src/redis/conf \
&& mkdir -p /usr/src/sh \
&& mkdir -p /usr/src/module \
&& mkdir -p /usr/src/redis/log
#下載redis安裝包(可以根據你的需要下載指定版本的redis)
RUN wget -O /usr/src/redis/redis-5.0.5.tar.gz "https://github.com/antirez/redis/archive/5.0.5.tar.gz" \
&& tar -xzf /usr/src/redis/redis-5.0.5.tar.gz -C /usr/src/redis \
&& cp /usr/src/redis/redis-5.0.5/src/redis-trib.rb /usr/src/redis/ \
&& rm -rf /usr/src/redis/redis-5.0.5.tar.tgz
#然後編譯安裝
RUN cd /usr/src/redis/redis-5.0.5 && make && make PREFIX=/usr/local/redis install \
&& ln -s /usr/local/redis/bin/* /usr/local/bin/ && rm -rf /usr/src/redis/redis-5.0.5
#容器啟動後執行的命令(在容器啟動後執行redis)
CMD ["/usr/local/bin/redis-server","/usr/src/redis/conf/redis.conf"]
2)構建redis映象
基於上面的Dockerfile可以編譯生成一個映象檔案,使用如下命令
docker build -t redis:test .
說明:
docker build:映象構建命令
-t: 指定映象的名稱,後面:後的test表示版本
.: 指定Dockerfile檔案的路徑,使用上述命令後會在當前目錄下尋找Dockerfile檔案
映象構建完畢之後會得到一個映象redis,版本為test
構建過程中出現問題會有提示,根據相應的提示修改Dockerfile檔案中的內容
3)構建docker-compose.yml檔案
version: "3"
services:
redis-1:
# build:
# context: .
# dockerfile: Dockerfile
image: redis:test #指定映象,使用上一步構建的映象
restart: always
container_name: redis-1 #指定容器的名字
volumes: #掛載共享目錄,指定之後宿主機和容器就可以共享檔案,比如從宿主機發送檔案到容器或者從容器中傳送檔案到宿主機
- /app/docker/redis/redis-1:/usr/src/redis
networks: #指定網段,也可以不指定,如果不指定的話每次重啟會隨機分配一個ip
mybridge:
ipv4_address: 192.168.1.2
ports: #指定埠對映
- 6380:6379
- 16380:16379
# command: /usr/local/bin/redis-sentinel /usr/src/redis/conf/sentinel.conf
redis-2:
# build:
# context: .
# dockerfile: Dockerfile
image: redis:test
restart: always
container_name: redis-2
volumes:
- /app/docker/redis/redis-2:/usr/src/redis
networks:
mybridge:
ipv4_address: 192.168.1.3
ports:
- 6381:6379
- 16381:16379
# command: /usr/local/bin/redis-sentinel /usr/src/redis/conf/sentinel.conf
redis-3:
# build:
# context: .
# dockerfile: Dockerfile
image: redis:test
restart: always
container_name: redis-3
volumes:
- /app/docker/redis/redis-3:/usr/src/redis
networks:
mybridge:
ipv4_address: 192.168.1.4
ports:
- 6382:6379
- 16382:16379
# command: /usr/local/bin/redis-sentinel /usr/src/redis/conf/sentinel.conf
redis-4:
# build:
# context: .
# dockerfile: Dockerfile
image: redis:test
restart: always
container_name: redis-4
volumes:
- /app/docker/redis/redis-4:/usr/src/redis
networks:
mybridge:
ipv4_address: 192.168.1.5
ports:
- 6383:6379
- 16383:16379
# command: /usr/local/bin/redis-sentinel /usr/src/redis/conf/sentinel.conf
redis-5:
image: redis:test
restart: always
container_name: redis-5
volumes:
- /app/docker/redis/redis-5:/usr/src/redis
networks:
mybridge:
ipv4_address: 192.168.1.6
ports:
- 6384:6379
- 16384:16379
# command: /usr/local/bin/redis-sentinel /usr/src/redis/conf/sentinel.conf
redis-6:
image: redis:test
restart: always
container_name: redis-6
volumes:
- /app/docker/redis/redis-6:/usr/src/redis
networks:
mybridge:
ipv4_address: 192.168.1.7
ports:
- 6385:6379
- 16385:16379
# command: /usr/local/bin/redis-sentinel /usr/src/redis/conf/sentinel.conf
networks:
mybridge:
external:
name: mynetwork
在docker-compose.yml檔案的目錄下執行docker-compose up -d命令啟動redis容器。完成之後可以通過docker ps命令檢視啟動後的容器情況,如果啟動正常會有如下頁面
分別有每個容器的id以及容器對應的映象名稱,表示是從redis:test這個映象構建的
三.搭建redis叢集
通過命令docker exec -it868a909ee66c sh 命令進入到redis-6這個容器中,當然也可以選擇進入到別的容器。檢視當前容器的端口占用情況,會出現如下所示,表示redis啟動正常。
redis5版本之後提供了cluster命令,使得構建cluster叢集變得非常方便,使用如下命令即可
redis-cli --cluster create 192.168.1.2:6379 192.168.1.3:6379 192.168.1.4:6379 192.168.1.4:6379 192.168.1.6:6379 192.168.1.7:6379 --cluster-replicas 1
說明:
-cluster create:表示使用redis的cluster命令建立叢集,後面跟著每個redis例項對應的ip和埠
--cluster-replicas:表示一個主節點有幾個從節點,本次配置為一個
執行上述命令建立叢集如果正常的話,redis會自動分別主從以及slot的分配,然後會詢問是否接受它的分配規則,選擇yes即可。具體情況如下圖
第一次出現錯誤是應為我在redis的配置檔案中配置了密碼,在生成叢集時沒有加上密碼導致認證不通過。加上之後重新執行命令會自動生成叢集。看到如下介面表示redis叢集建立成功。
使用redis-cli -a 123456 cluster nodes檢視叢集節點的分佈情況。
選擇192.168.1.2(master中的一個)這個redis例項
設定key first的值,會首先計算first對應的hash值,然後根據雜湊值與slot的個數取餘,決定first應該存放到哪個redis例項中,途中提示first應該到192.168.1.4中的redis中。進入到192.168.1.4對應的redis中,同樣進行設定操作。結果如下。
至此,整個redis叢集搭建完畢。
注:redis配置檔案的內容
bind 0.0.0.0
port 6379
tcp-keepalive 300
supervised no
loglevel notice
databases 16
save 900 1
save 300 10
save 60 10000
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename "dump.rdb"
dir "/usr/src/redis/data"
masterauth "123456"
slave-serve-stale-data yes
slave-read-only yes
repl-diskless-sync no
repl-diskless-sync-delay 5
repl-disable-tcp-nodelay no
slave-priority 100
requirepass "123456"
appendonly yes
appendfilename "appendonly.aof"
appendfsync everysec
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
aof-load-truncated yes
lua-time-limit 5000
cluster-enabled yes
cluster-node-timeout 15000
slowlog-max-len 128
latency-monitor-threshold 0
notify-keyspace-events ""
hash-max-ziplist-entries 512
hash-max-ziplist-value 64
list-max-ziplist-size -2
list-compress-depth 0
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
hll-sparse-max-bytes 3000
activerehashing yes
client-output-buffer-limit normal 0 0 0
client-output-buffer-limit slave 256mb 64mb 60
client-output-buffer-limit pubsub 32mb 8mb 60
hz 10
aof-rewrite-incremental-fsync yes