1. 程式人生 > >MongoDB復制集部署和基本管理

MongoDB復制集部署和基本管理

parent rom 通過 日誌 serve ati 方便 nec ember

MongoDB復制集部署和基本管理

MongoDB復制集概述

復制集(Replica Sets)是額外的數據副本,是跨多個服務器同步數據的過程,復制集提供了冗余並增加了數據的可用性,通過復制集可以對硬件故障和中斷服務進行恢復。

復制集由下列優點:

  • 讓數據更安全
  • 高數據可用性(7*24)
  • 災難恢復
  • 無停機維護(如備份、索引重建、故障轉移)
  • 讀縮放(額外的副本讀取)
  • 副本集對應用程序是透明的

    復制集工作原理

    MongoDB的復制集至少需要兩個節點。其中一個節點是主節點(Primary),負責處理客戶端的請求,其余的都是從節點(Serondary),負責復制主節點上的數據。

MongoDB各個節點常見的搭配方式為:一主一從或者一主多從。主節點記錄所有打操作到oplog中,從節點定期輪詢主節點獲取這些操作,然後對自己的數據副本執行這些操作。從而保證從節點的數據與主節點一致。如下圖所示:

客戶端在主節點寫入數據,在主節點寫入數據,主節點與從節點進行數據交互保證數據的一致性。如果其中一個節點出現故障,其他節點馬上會將業務接過來,無需停機操作。

MongoDB復制集部署

配置多個實例

在上一篇的博客中已經講解了MongoDB開啟多實例的方法,這裏就不多贅述,我們用相同的方法創建了四個MongoDB實例。在啟動四個實例前,先要修改每個實例的配置文件,配置replSet參數值都為同一個值,這個值作為復制集的名稱,具體操作如下:

[root@localhost ~]# vim /usr/local/mongodb/bin/mongodb1.conf 
port=27017
dbpath=/data/mongodb1
logpath=/data/logs/mongodb/mongodb1.log
logappend=true
fork=true
maxConns=5000
replSet=kgcrs                     #配置復制集的名稱

在其他的三個實例的配置文件中最後一行,加上相同的一句代碼就行。開啟四個實例進程。

[root@localhost ~]# export PATH=$PATH:/usr/local/mongodb/bin/
#由於之前重啟過,重新設置環境變量
[root@localhost ~]# mongod -f /usr/local/mongodb/bin/mongodb1.conf
#開啟端口號為27017的實例進程
2018-07-17T10:33:29.835+0800 I CONTROL  [main] Automatically disabling TLS 1.0, to force-enable TLS 1.0 specify --sslDisabledProtocols ‘none‘
about to fork child process, waiting until server is ready for connections.
forked process: 3751
child process started successfully, parent exiting

初始化配置並啟動復制集

啟動完4個MongoDB實例後,下面介紹如何配置並啟動MongoDB復制集。這裏先配置包含3個節點的復制集(後面會再進行添加最後一個實例),Primary代表主節點。Secondary代表從節點

[root@localhost bin]# mongod -f /usr/local/mongodb/bin/mongodb2.conf --smallfiles
about to fork child process, waiting until server is ready for connections.
forked process: 20207
child process started successfully, parent exiting
[root@localhost bin]# mongod -f /usr/local/mongodb/bin/mongodb3.conf --smallfiles
about to fork child process, waiting until server is ready for connections.
forked process: 20230
child process started successfully, parent exiting
[root@localhost bin]# mongod -f /usr/local/mongodb/bin/mongodb4.conf --smallfiles
about to fork child process, waiting until server is ready for connections.
forked process: 20253
child process started successfully, parent exiting

可以看到四個實例都已經啟動成功,對應的端口號都已經打開。然後進入到端口號為27017端口號的實例中。
技術分享圖片

[root@localhost bin]# mongo   #默認就是端口號為27017的實例
> cfg={"_id":"kgcrs","members":[{"_id":0,"host":"192.168.100.201:27017"},{"_id":1,"host":"192.168.100.201:27018"},{"_id":2,"host":"192.168.100.201:27019"}]}
#這句代碼的意思就是向kgcrs的復制集中添加三個成員
> rs.initiate(cfg)
{ "ok" : 1 }
#對復制集進行初始化啟動復制集,啟動復制集後,可以通過rs.status()查看復制集的完整信息。

技術分享圖片
技術分享圖片
技術分享圖片
技術分享圖片

增加和刪除節點

配置啟動復制集後,還可以通過rs.add()和rs.remove()命令方便地添加和刪除節點。

kgcrs:PRIMARY> rs.add("192.168.100.201:27020")
{ "ok" : 1 }
#可以看到27020端口的實例添加成功
kgcrs:PRIMARY> rs.remove("192.168.100.201:27019")
{ "ok" : 1 }
#可以看到27019端口的實例被刪除了

MongoDB復制集切換

1、模擬故障自動切換

通過kill命令可以停止復制集的當前節點,然後查看主節點會自動切換到其他節點上,可以看到當前端口為27017的實例為主節點。
技術分享圖片

[root@localhost bin]# netstat -ntap| grep mongo
tcp        0      0 0.0.0.0:27019           0.0.0.0:*               LISTEN      20230/mongod        
tcp        0      0 0.0.0.0:27020           0.0.0.0:*               LISTEN      20253/mongod        
tcp        0      0 0.0.0.0:27017           0.0.0.0:*               LISTEN      20055/mongod        
tcp        0      0 0.0.0.0:27018           0.0.0.0:*               LISTEN      20207/mongod 
[root@localhost bin]# kill -9 20055 #kill掉27017端口的進程
kgcrs:SECONDARY> rs.status()
#可以看到現在的主節點是端口為27019的實例

技術分享圖片
2、手動進行主從切換

首先要先進入到主節點的實例中,只有主節點才有權限進行主從節點切換。

[root@localhost bin]# mongo --port 27019
kgcrs:PRIMARY> rs.freeze(30)   #暫停30s不參加選舉
{ "ok" : 1 }
kgcrs:PRIMARY> rs.stepDown(60,30)  #告訴主節點交出主節點位置,然後維持從節點狀態不少於60s,同時等待30s以使主節點和從節點日誌同步,再次查看狀態,發現主節點已經切換到另外一個實例中。
2018-07-18T15:52:53.254+0800 I NETWORK  [thread1] trying reconnect to 127.0.0.1:27019 (127.0.0.1) failed
2018-07-18T15:52:53.256+0800 I NETWORK  [thread1] reconnect 127.0.0.1:27019 (127.0.0.1) ok
kgcrs:SECONDARY> rs.status()

技術分享圖片

復制集的選舉原理

復制的原理

復制是基於操作日誌oplog,相當於MySQL中的二進制日誌,只記錄發生改變的記錄。復制是將主機點的oplog日誌同步並應用到其他從節點的過程

選舉的原理

節點類型分為標準(host)節點,被動(passive)節點和仲裁(abriter)節點。

(1)只有標準節點可能被選舉為活躍(primary)節點,由選舉權。被動節點有完整副本,不可能成為活躍節點,有選舉權。仲裁節點不復制數據,不可能成為活躍節點,只有選舉權。

(2)標準節點與被動節點的區別:priority值高者是標準節點,低者則成為被動節點。

(3)選舉規則是票數高者獲勝,priority是優先權為0到1000的值,相當於額外增加0到1000的票數。選舉結果:票數高者獲勝;若票數相同,數據新者獲勝。

配置復制集的優先級

重新配置4個節點的MongoDB復制集,設置兩個標準節點,喲個被動節點和一個仲裁節點。這個設置要在主節點上配置。

kgcrs:PRIMARY> > cfg={"_id":"kgcrs","members":[{"_id":0,"host":"192.168.58.131:27017","priority":100},{"_id":1,"host":"192.168.58.131:27018","priority":100},{"_id":2,"host":"192.168.58.131:27019","priority":0},{"_id":3,"host":"192.168.58.131:27020","arbiterOnly":true}]}
#這句代碼分別設置了四個實例的屬性,優先級
kgcrs:PRIMARY> rs.reconfig(cfg)
{ "ok":1 }

可以看到現在端口27018的實例,現在是主節點。
技術分享圖片

模擬主節點故障

如果主節點出現故障,另外一個標準節點將會被選舉為新的主節點。

[root@promote ~]# mongod -f /usr/local/mongodb/bin/mongodb2.conf --shutdown
2018-07-22T09:20:02.706+0800 I CONTROL  [main] Automatically disabling TLS 1.0, to force-enable TLS 1.0 specify --sslDisabledProtocols ‘none‘
killing process with pid: 9639
kgcrs:PRIMARY> rs.isMaster()

技術分享圖片
可以看到27017端口的實例已經成為主節點。

模擬所有標準節點都出現故障

如果所有標準節點出現故障,被動節點和仲裁節點都不能成為主節點。

[root@promote ~]# mongod -f /usr/local/mongodb/bin/mongodb1.conf --shutdown
2018-07-22T09:24:08.290+0800 I CONTROL  [main] Automatically disabling TLS 1.0, to force-enable TLS 1.0 specify --sslDisabledProtocols ‘none‘
killing process with pid: 9740
kgcrs:SECONDARY> rs.isMaster()

技術分享圖片

MongoDB復制集部署和基本管理