2. 程式人生 > >MongoDB shard叢集部署

MongoDB shard叢集部署

阿新 • • 發佈：2019-02-01
# dpkg -l | grep mongo
ii  mongodb-org                              3.2.14                            amd64        MongoDB open source document-oriented database system (metapackage)
ii  mongodb-org-mongos                       3.2.14                            amd64        MongoDB sharded cluster query router
ii  mongodb-org-server                       3.2.14                            amd64        MongoDB database server
ii  mongodb-org-shell                        3.2.14                            amd64        MongoDB shell client
ii  mongodb-org-tools                        3.2.14                            amd64        MongoDB tools



172.16.1.62 mongos(27018) configsvr(27019)
172.16.1.63 shard1 (27020, 27021, 27022)
172.16.1.64 shard2 (27020, 27021, 27022)


在172.16.1.63和172.16.1.65上執行
mkdir -p /home/data/
mkdir -p /home/log
mkdir -p /home/data/data_27020
mkdir -p /home/data/data_27021
mkdir -p /home/data/data_27022


mkfs.xfs -f /dev/vdb 
mount -t xfs -o rw,noatime /dev/vdb /home/data


在172.16.1.62上執行
mkdir -p /home/data/
mkdir -p /home/log


在主機172.16.1.63上執行下面的操作
vim /home/data/mongod_27020.cfg
內容如下
systemLog:
  destination: file
  path: /home/mongo/log/shard1_27020.log
  logAppend: true
processManagement:
  fork: true
  pidFilePath: "/home/mongo/shard1_27020.pid"
net:
  port: 27020
storage:
  dbPath: "/home/mongo/data/data_27020"
  engine: wiredTiger
  journal:
    enabled: true
  directoryPerDB: true
operationProfiling:
  slowOpThresholdMs: 10
  mode: "slowOp"
#security:
#  keyFile: "/etc/mongodb/keyfile"
#  clusterAuthMode: "keyFile"
replication:
  oplogSizeMB: 50
  replSetName: "shard1"
  secondaryIndexPrefetch: "all"


vim /home/data/mongod_27021.cfg
內容如下
systemLog:
  destination: file
  path: /home/mongo/log/shard1_27021.log
  logAppend: true
processManagement:
  fork: true
  pidFilePath: "/home/mongo/shard1_27021.pid"
net:
  port: 27021
storage:
  dbPath: "/home/mongo/data/data_27021"
  engine: wiredTiger
  journal:
    enabled: true
  directoryPerDB: true
operationProfiling:
  slowOpThresholdMs: 10
  mode: "slowOp"
#security:
#  keyFile: "/etc/mongodb/keyfile"
#  clusterAuthMode: "keyFile"
replication:
  oplogSizeMB: 50
  replSetName: "shard1"
  secondaryIndexPrefetch: "all"
  
vim /home/data/mongod_27021.cfg
內容如下
systemLog:
  destination: file
  path: /home/mongo/log/shard1_27022.log
  logAppend: true
processManagement:
  fork: true
  pidFilePath: "/home/mongo/shard1_27022.pid"
net:
  port: 27022
storage:
  dbPath: "/home/mongo/data/data_27022"
  engine: wiredTiger
  journal:
    enabled: true
  directoryPerDB: true
operationProfiling:
  slowOpThresholdMs: 10
  mode: "slowOp"
#security:
#  keyFile: "/etc/mongodb/keyfile"
#  clusterAuthMode: "keyFile"
replication:
  oplogSizeMB: 50
  replSetName: "shard1"
  secondaryIndexPrefetch: "all"



在主機172.16.1.65上執行下面的操作
vim /home/data/mongod_27020.cfg
systemLog:
  destination: file
  path: /home/mongo/log/shard2_27020.log
  logAppend: true
processManagement:
  fork: true
  pidFilePath: "/home/mongo/shard2_27020.pid"
net:
  port: 27020
storage:
  dbPath: "/home/mongo/data/data_27020"
  engine: wiredTiger
  journal:
    enabled: true
  directoryPerDB: true
operationProfiling:
  slowOpThresholdMs: 10
  mode: "slowOp"
#security:
#  keyFile: "/etc/mongodb/keyfile"
#  clusterAuthMode: "keyFile"
replication:
  oplogSizeMB: 50
  replSetName: "shard2"
  secondaryIndexPrefetch: "all"


在主機172.16.1.65上執行下面的操作
vim /home/data/mongod_27021.cfg  
systemLog:
  destination: file
  path: /home/mongo/log/shard2_27021.log
  logAppend: true
processManagement:
  fork: true
  pidFilePath: "/home/mongo/shard2_27021.pid"
net:
  port: 27021
storage:
  dbPath: "/home/mongo/data/data_27021"
  engine: wiredTiger
  journal:
    enabled: true
  directoryPerDB: true
operationProfiling:
  slowOpThresholdMs: 10
  mode: "slowOp"
#security:
#  keyFile: "/etc/mongodb/keyfile"
#  clusterAuthMode: "keyFile"
replication:
  oplogSizeMB: 50
  replSetName: "shard2"
  secondaryIndexPrefetch: "all"
  
在主機172.16.1.65上執行下面的操作
vim /home/data/mongod_27022.cfg
systemLog:
  destination: file
  path: /home/mongo/log/shard2_27022.log
  logAppend: true
processManagement:
  fork: true
  pidFilePath: "/home/mongo/shard2_27022.pid"
net:
  port: 27022
storage:
  dbPath: "/home/mongo/data/data_27022"
  engine: wiredTiger
  journal:
    enabled: true
  directoryPerDB: true
operationProfiling:
  slowOpThresholdMs: 10
  mode: "slowOp"
#security:
#  keyFile: "/etc/mongodb/keyfile"
#  clusterAuthMode: "keyFile"
replication:
  oplogSizeMB: 50
  replSetName: "shard2"
  secondaryIndexPrefetch: "all"

在主機172.16.1.62上執行下面的操作
vim /home/data/mongos.cfg
systemLog:
  destination: file
  path: /home/mongo/log/mongos.log
  logAppend: true
processManagement:
  fork: true
  pidFilePath: /home/mongo/data/mongos.pid
net:
  port: 27018
sharding:
  configDB: 172.16.1.62:27019
#security:
#  keyFile: "/etc/mongodb/keyfile"
#  clusterAuthMode: "keyFile" 
 
在主機172.16.1.62上執行下面的操作
vim /home/data/configsvr.cfg
systemLog:
  destination: file
  path: /home/mongo/log/configsvr.log
  logAppend: true
processManagement:
  fork: true
  pidFilePath: "/home/mongo/data/configsvr.pid"
net:
  port: 27019
storage:
  dbPath: "/home/mongo/data/config"
  engine: wiredTiger
  journal:
    enabled: true
#security:
#  keyFile: "/etc/mongodb/keyfile"
#  clusterAuthMode: "keyFile"
sharding:
  clusterRole: configsvr

啟動服務

主機172.16.1.63
mongod --config /home/data/mongod_27020.cfg 
mongod --config /home/data/mongod_27021.cfg 
mongod --config /home/data/mongod_27022.cfg 


主機172.16.1.65
mongod --config /home/data/mongod_27020.cfg 
mongod --config /home/data/mongod_27021.cfg 
mongod --config /home/data/mongod_27022.cfg


主機172.16.1.62
mongod --config /home/data/configsvr.cfg 
mongos --config /home/data/mongos.cfg 

主機172.16.1.63
mongo --port 27020
use admin
config = { _id:"shard1", members:[{_id:0,host:"172.16.1.63:27020"},{_id:1,host:"172.16.1.63:27021"},{_id:2,host:"172.16.1.63:27022",arbiterOnly:true}]} 
rs.initiate(config)


主機172.16.1.65
mongo --port 27020
use admin
config = { _id:"shard2", members:[{_id:0,host:"172.16.1.65:27020"},{_id:1,host:"172.16.1.65:27021"},{_id:2,host:"172.16.1.65:27022",arbiterOnly:true}]} 
rs.initiate(config)

主機172.16.1.62
mongo --port 27018
use admin
db.runCommand({addshard :"shard1/172.16.1.63:27020,172.16.1.63:27021,172.16.1.63:27022"});
db.runCommand({addshard :"shard2/172.16.1.65:27020,172.16.1.65:27021,172.16.1.65:27022"});
sh.status()
db.runCommand({listshards : 1 } )


建立資料驗證寫入成功
sh.enableSharding("testdb")
sh.shardCollection("testdb.heheda",{_id : 1 })
use testdb
for (i=1;i<=100;i++) db.heheda.insert({name: "user"+i, age: (i%10)})

相關推薦

MongoDB shard叢集部署

# dpkg -l | grep mongo ii  mongodb-org                              3.2.14                            amd64        MongoDB open source do

MongoDB分片叢集部署

之前提到了mongodb複製集（副本集）的一些概念，在這篇博文介紹一下如何使用複製集在單機上進行分片叢集的部署。在這裡先介紹叢集部署複製集和分片的一些概念，然後再完成部署實現。 CAP 首先我們來了解一下什麼是CAP理論，其核心是：一個分散式系統不可能同

搭建mongodb分片shard叢集

MongoDB是一個高效能，開源，無模式的文件型資料庫，開發語言是C ++。它在許多場景下可用於替代傳統的關係型資料庫或鍵/值儲存方式。 優點： 1.面向集合儲存，易儲存物件型別的資料。 2.支援動態查詢。 3.支援完全索引，包含內部物件。 4.使用高效的二進位制資料儲存，包括大

CentOS7+Docker+MangoDB下部署簡單的MongoDB分片叢集

簡單的在Docker上快速部署MongoDB分片叢集 前言 文中使用的環境如下 OS：CentOS Linux release 7.5.1804 (Core) Docker：Docker version 18.06.1-ce, build e68fc7a docker image中的MongoDB

MongoDB叢集部署原理

在MongoDB安裝目錄下，可以發現有mongo.exe,mongod.exe,mongos.exe三個應用程式，這三個應用程式也是MongoDB底層實現的主要支柱，它的實現原理和Zookeeper是非常相似的。 叢集部署 MongoDB的叢集部署方案中有三種

MongoDB DBA 實踐6-----MongoDB的分片叢集部署（win單機）

                                          分片叢集部署圖如

部署MongoDB分片叢集步驟

security:    keyFile: /usr/local/mongodb/authentication/keyFile  sharding:    clusterRole: shardsvr replication:    replSetName: rs1 net:    port: 30001 st

mongodb叢集部署(經過生產測試完整）

先去官網下載0.tar -xvf 解壓檔案 1. mkdir  mongos config  shard1  shard2  shard3 mkdir -p /data/mongdb/mongos/log mkdir -p /data/mongdb/config/log m

mongodb基礎環境部署(windows系統下)

無法連接 lin rect 技術分享 麻煩 基本 dir 小結 www 前言:由於項目組需要進行大數據管理分析系統的開發，同時又希望所用的到相關軟件和庫均為開源，因此項選擇使用mongodb這一非關系型，結構組織較為靈活的開源數據庫。同時之所以寫該文檔，主要是認為網上太多

MongoDB 3.6 部署實錄

linux MongoDB [root@king01 ~]# groupadd mongod[root@king01 ~]# useradd -s /sbin/nologin -M -g mongod mongod [root@king01 ~]# tar zxvf mongodb-linux-x86

大數據之高可用Mongodb集群部署

大數據 在這裏相信有許多想要學習大數據的同學，大家可以關註小編頭條號和轉發，關註私信【學習> 】即可免費領取一整套系統的大數據學習教程 另外，大數據初學者有什麽不懂的可以關註私信【學習】和轉發——我剛整理了一份大數據 2018最新的0基礎入門和進階教程，無私分享 大數據之高可用Mongodb集群

MongoDB Ops Manager 部署指南

location ont eml 完成 配置文件 3.3 enabled uri 基礎 MongoDB Ops Manager（MMS）是用於監控和備份MongoDB的基礎設施服務。其中監控的服務是免費的，備份的服務是需要收費的。本文以最新的4.0.1為例，介紹如何安裝配置

MongoDb分片叢集認證

本文主要基於已經搭建好的未認證叢集，結合上篇Mongodb副本集分片叢集模式環境部署（https://www.cnblogs.com/woxingwoxue/p/9875878.html）， MongoDb分片叢集認證幾個主要流程1.在分片叢集環境中，副本集內成員之間需要用keyFile認證，mongos與配

FastDFS伺服器叢集部署和整合客戶端到SpringBoot

FastDFS是一個開源的輕量級分散式檔案系統，它對檔案進行管理，功能包括：檔案儲存、檔案同步、檔案訪問（檔案上傳、檔案下載）等，解決了大容量儲存和負載均衡的問題，同時也能做到在叢集環境下一臺機子上傳檔案，同時該組下的其他節點下也備份了上傳的檔案。做分散式系統開發時，其中要解決的一個問題就是圖片、音視訊

Centos7+nginx+tomcat 叢集部署實戰

1:安裝centos7(連結：http://pan.baidu.com/s/1o80x36a 密碼：xuwb)，安裝步驟自己百度，並克隆4個虛擬機器 我的ip為(192.168.72.129 192.168.72.130 192.168.72.131 192.168.72.132) 2:

004.etcd叢集部署-發現

一 etcd發現簡介 1.1 需求背景 在實際環境中，叢集成員的ip可能不會提前知道。如使用dhcp自動獲取的情況，在這些情況下，使用自動發現來引導etcdetcd叢集，而不是指定靜態配置，這個過程被稱為“發現”。 etcd Discovery 使用已有的 etcd cluster

(視訊)asp.net core系列之k8s叢集部署視訊

0、前言 應許多網友的要求，特此錄製一下k8s叢集部署的視訊。在錄製完成後發現視訊的聲音存在一點瑕疵，不過不影響大家的觀感。 由於B站的賬號等級不夠無法上傳視訊因此先放在youku上(存在廣告)，請大家多多包涵。 一、視訊說明 1、視訊地址： 如果有不懂，或者有疑問的歡迎留言。視訊分為兩段。 第一

spark叢集部署

1、下載spark,在這之前需要安裝scala wget https://d3kbcqa49mib13.cloudfront.net/spark-2.2.0-bin-hadoop2.7.tgz  2、配置環境變數 vi /etc/profile export SPARK_H

rabbitmq線上遇到的問題以及叢集部署遇到的坑

作業系統發行版：CentOS7 RabbitMQ版本：3.6.11 伺服器主機規劃： 10.168.17.102 mq07.mq-cluster.mall.lt.com 10.168.17.98 mq08.mq-cluster.mall.lt.com 10.168.17.64

MySQL高可用負載均衡叢集部署

簡介 使用MySQL時隨著時間的增長，使用者量以及資料量的逐漸增加，訪問量更是劇增，最終將會使MySQL達到某個瓶頸，那麼MySQL的效能將會大大降低。這一結果也不利於軟體的推廣。   那麼如何跨過這個瓶頸，提高MySQL的併發量呢？方法有很多，分散式資料庫、讀寫分離