2. 程式人生 > >mysql5.7 MGR集群搭建

mysql5.7 MGR集群搭建

阿新 • • 發佈：2017-06-08
解決方案 mysql 數據庫 文章 而且 mysql集群搭建

技術分享

mysql5.7 MGR集群搭建部署

此文章由隊員（諄諄）擬寫

此文章來自 烏龜運維 官網 wuguiyunwei.com

QQ群 602183872

最近看了一下mysql5.7的MGR集群挺不錯的，有單主和多主模式，於是乎搭建測試了一下效果還不錯，我指的不錯是搭建和維護方面都比較簡單。網上絕大多數都是單主模式，當然我這裏也是，為了加深印象，特意記錄一下搭建過程，等以後再去嘗試多主模式，相信大家現在數據庫的瓶頸基本都是在寫，讀寫分離雖然是一種可行的解決方案，但是如果數據量很大，寫一樣會有問題，雖然有些解決方案能部署多個主節點，能同時進行讀寫，但是腦裂又是一個嚴重的問題，所以這裏MGR集群內置了自動化腦裂防護機制又得到了很多人的青睞，這裏MGR簡稱MySQL Group Replication是MySQL官方於2016年12月推出的一個全新的高可用與高擴展的解決方案。註意本文這裏不再闡述原理性的東西。

註意：我這裏采用編譯安裝的方式，如果想簡單直接yum安裝mysql5.7也行，mysql編譯安裝需要的磁盤空間還是比較大的，一般在7G左右，所以要提前規劃好，用三個節點比較接近生產環境，而且更直接清晰。
詳細部署信息如下：

主機名IP地址安裝軟件用途
apache192.168.2.25cmake、boost、mysql節點
nginx192.168.2.26cmake、boost、mysql節點
kibana192.168.2.30cmake、boost、mysql節點

1、三臺機器準備工作

  1. rpm -qa mysql mariadb

如果有則卸載即可！
寫入hosts文件映射關系，集群用得到
192.168.2.25 apache

192.168.2.26 nginx
192.168.2.30 kibana
2、安裝依賴包

  1. yum install gcc gcc-c++ ncurses-devel -y

3、安裝cmake，下載地址：https://cmake.org/download/

  1. tar zxvf cmake-3.7.2.tar.gz

  2. cd make-3.7.2

  3. ./configure

  4. gmake && gmake install

4、安裝boost，因為mysql5.7需要，註意這裏下載版本是1_59_0和mysql版本是對應的，如果你的MySQL版本和我的不一樣，不添加-DWITH_BOOST這個參數時它會報錯告訴你需要下載boost的哪個版本。

  1. tar zxvf boost_1_59_0.tar.gz

  2. cp -r boost_1_59_0 /usr/local/boost

5、安裝mysql5.7.17及初始化操作

  1. groupadd mysql

  2. useradd -M -s /sbin/nologin mysql -g mysql

  3. tar zxvf mysql-5.7.17.tar.gz

  4. cd mysql-5.7.17

  5. cmake -DCMAKE_INSTALL_PREFIX=/data/mysql -DSYSCONFDIR=/etc -DDEFAULT_CHARSET=utf8 -DDEFAULT_COLLATION=utf8_general_ci -DWITH_EXTRA_CHARSETS=all -DWITH_BOOST=/usr/local/boost

  6. make

  7. make install

  8. chown -R mysql.mysql /data/mysql

  9. mv /etc/my.cnf /etc/my.cnf.default

  10. cp /data/mysql/support-files/my-default.cnf /etc/my.cnf

  11. /data/mysql/bin/mysqld –initialize –user=mysql –basedir=/data/mysql –datadir=/data/mysql/data //註意初始化會生成一個隨機的密碼，請牢記

  12. echo “PATH=$PATH:/data/mysql/bin” >> /etc/profile

  13. source /etc/profile

  14. cp /data/mysql/support-files/mysql.server /etc/rc.d/init.d/mysqld

  15. chmod +x /etc/rc.d/init.d/mysqld

以上步驟在三臺機器上都需要執行

6、開始搭建MGR集群環境，修改第一個節點的my.cnf文件，內容如下：

  1. # For advice on how to change settings please see

  2. # http://dev.mysql.com/doc/refman/5.7/en/server-configuration-defaults.html

  3. # *** DO NOT EDIT THIS FILE. It’s a template which will be copied to the

  4. # *** default location during install, and will be replaced if you

  5. # *** upgrade to a newer version of MySQL.


  7. [mysqld]


  9. # Remove leading # and set to the amount of RAM for the most important data

  10. # cache in MySQL. Start at 70% of total RAM for dedicated server, else 10%.

  11. # innodb_buffer_pool_size = 128M


  13. # Remove leading # to turn on a very important data integrity option: logging

  14. # changes to the binary log between backups.

  15. # log_bin


  17. # These are commonly set, remove the # and set as required.

  18. basedir = /data/mysql

  19. datadir = /data/mysql/data

  20. port = 3306

  21. socket = /data/mysql/data/mysql.sock

  22. log-error = /data/mysql/data/mysqld.log

  23. pid-file = /data/mysql/data/mysqld.pid


  25. # Remove leading # to set options mainly useful for reporting servers.

  26. # The server defaults are faster for transactions and fast SELECTs.

  27. # Adjust sizes as needed, experiment to find the optimal values.

  28. # join_buffer_size = 128M

  29. # sort_buffer_size = 2M

  30. # read_rnd_buffer_size = 2M


  32. sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES


  34. # Group Replication

  35. server_id = 1

  36. gtid_mode = ON

  37. enforce_gtid_consistency = ON

  38. master_info_repository = TABLE

  39. relay_log_info_repository = TABLE

  40. binlog_checksum = NONE

  41. log_slave_updates = ON

  42. log_bin = binlog

  43. binlog_format= ROW


  45. transaction_write_set_extraction = XXHASH64

  46. loose-group_replication_group_name = ‘ce9be252-2b71-11e6-b8f4-00212844f856’

  47. loose-group_replication_start_on_boot = off

  48. loose-group_replication_local_address = ‘192.168.2.25:33061’

  49. loose-group_replication_group_seeds =’192.168.2.25:33061,192.168.2.26:33061,192.168.2.30:33061′

  50. loose-group_replication_bootstrap_group = off


  52. [client]

  53. socket = /data/mysql/data/mysql.sock

啟動mysql服務
/etc/init.d/mysqld start

  1. set sql_log_bin=0;

  2. create user [email protected]%’;

  3. grant replication slave on *.* to [email protected]%’ identified by ‘rpl_pass’;

  4. flush privileges;

  5. set sql_log_bin=1;

  6. change master to master_user=’rpl_user’,master_password=’rpl_pass’ for channel ‘group_replication_recovery’;

  7. install PLUGIN group_replication SONAME ‘group_replication.so’;

  8. set global group_replication_bootstrap_group=ON;

  9. start group_replication;

  10. set global group_replication_bootstrap_group=OFF;

  11. select * from performance_schema.replication_group_members;

顯示結果如下：

技術分享

如果出現ONLINE，說明正常，這就是主節點，再搭建兩個從節點。

7、第二個節點加入集群，復制剛剛的第一個節點的主配置文件my.cnf，只需要修改兩個地方就行，已經用紅色標註

  1. # For advice on how to change settings please see

  2. # http://dev.mysql.com/doc/refman/5.7/en/server-configuration-defaults.html

  3. # *** DO NOT EDIT THIS FILE. It’s a template which will be copied to the

  4. # *** default location during install, and will be replaced if you

  5. # *** upgrade to a newer version of MySQL.


  7. [mysqld]


  9. # Remove leading # and set to the amount of RAM for the most important data

  10. # cache in MySQL. Start at 70% of total RAM for dedicated server, else 10%.

  11. # innodb_buffer_pool_size = 128M


  13. # Remove leading # to turn on a very important data integrity option: logging

  14. # changes to the binary log between backups.

  15. # log_bin


  17. # These are commonly set, remove the # and set as required.

  18. basedir = /data/mysql

  19. datadir = /data/mysql/data

  20. port = 3306

  21. socket = /data/mysql/data/mysql.sock

  22. log-error = /data/mysql/data/mysqld.log

  23. pid-file = /data/mysql/data/mysqld.pid


  25. # Remove leading # to set options mainly useful for reporting servers.

  26. # The server defaults are faster for transactions and fast SELECTs.

  27. # Adjust sizes as needed, experiment to find the optimal values.

  28. # join_buffer_size = 128M

  29. # sort_buffer_size = 2M

  30. # read_rnd_buffer_size = 2M


  32. sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES


  34. # Group Replication

  35. server_id = 2

  36. gtid_mode = ON

  37. enforce_gtid_consistency = ON

  38. master_info_repository = TABLE

  39. relay_log_info_repository = TABLE

  40. binlog_checksum = NONE

  41. log_slave_updates = ON

  42. log_bin = binlog

  43. binlog_format= ROW


  45. transaction_write_set_extraction = XXHASH64

  46. loose-group_replication_group_name = ‘ce9be252-2b71-11e6-b8f4-00212844f856’

  47. loose-group_replication_start_on_boot = off

  48. loose-group_replication_local_address = ‘192.168.2.26:33061’

  49. loose-group_replication_group_seeds =’192.168.2.25:33061,192.168.2.26:33061,192.168.2.30:33061′

  50. loose-group_replication_bootstrap_group = off


  52. [client]

  53. socket = /data/mysql/data/mysql.sock

第二個節點執行如下命令：

  1. set sql_log_bin=0;

  2. create user [email protected]%’;

  3. grant replication slave on *.* to [email protected]%’ identified by ‘rpl_pass’;

  4. set sql_log_bin=1;

  5. change master to master_user=’rpl_user’,master_password=’rpl_pass’ for channel ‘group_replication_recovery’;

  6. install plugin group_replication SONAME ‘group_replication.so’;

  7. set global group_replication_allow_local_disjoint_gtids_join=ON;

  8. start group_replication;

顯示結果如下：

技術分享

同理第三個節點加入操作方法也和第二個節點一樣。
截圖如下：

技術分享

查詢哪個是主節點：

技術分享

從上圖來看很明顯apache主機是主節點。

測試步驟：
1、在主庫上創建一個庫，然後創建表，在兩個從庫上查詢數據是否同步？
2、兩個從庫只能執行查詢操作？
2、手動關閉主庫，確認兩個從庫其中一個是否會變成主庫？而且是MEMBER_ID第一個字母按優先級排列的接管主庫？

日常維護步驟：
1、如果從庫某一節點關閉

  1. start group_replication;

2、如果所有的庫都關閉後，第一個庫作為主庫首先執行

  1. set global group_replication_bootstrap_group=ON;

  2. start group_replication;

剩下的庫直接執行即可！

  1. start group_replication;

3、如果主庫故障，會自動從兩個從庫選出一個主庫，主庫啟動後再次執行如下命令後會變成從庫

  1. start group_replication;


mysql5.7 MGR集群搭建

相關推薦

mysql5.7 MGR集群搭建

解決方案 mysql 數據庫 文章 而且 mysql集群搭建 mysql5.7 MGR集群搭建部署此文章由隊員（諄諄）擬寫此文章來自 烏龜運維 官網 wuguiyunwei.comQQ群 602183872最近看了一下mysql5.7的MGR集群挺不錯的，有單主和多主模式，於是乎搭建測

mysql5.7 NDB集群

mysql -i ger specified oca values ava mysqld dbd 一、 1、NDB集群的初始配置 vi /etc/my.cnf #FIQhttps://dev.mysql.com/doc/refman/5.7/en/mys

MySQL MGR集群搭建

ESS mat sta height 運行 文章 回放 ide 獲取 本文來自網易雲社區，轉載務必請註明出處。本文將從零開始搭建一個MySQL Group Replication集群，包含3個節點。簡單介紹如何查詢MGR集群狀態信息。並介紹如何進行MGR節點上下線操作。先貼

Linux下Hadoop2.7.1集群環境的搭建（超詳細版）

目錄 hdfs cp命令 manage war 替代 share logs hadoop 本文旨在提供最基本的，可以用於在生產環境進行Hadoop、HDFS分布式環境的搭建，對自己是個總結和整理，也能方便新人學習使用。 一、基礎環境 在Linux上安裝Hadoop之前

Galera Cluster5.7 （CentOs7） 集群搭建

ret around mod password 遠程登錄 最大的 style line 等級 安裝環境： 　　centOs7 　　Galera Cluster5.7(MySql5.7) 下載galeracluster 　　下載地址http://galeracluster.c

mysql之PXC5.7.18集群系列——1.Percona XtraDB Cluster搭建

1. 相關準備 備註：rhel不安裝epel，很多叢集搭建依賴的包無法通過yum安裝，很是不便 2. 叢集節點 Nodes Hostname IP HAProxy haproxy 172.16.3.30

Storm集群搭建

targe 狀態信息 系統 根據 storm for 簡單介紹 div tails 　　上一篇隨筆中我介紹了Storm中的幾個重要概念：Topology,tuple,Spout和Bolt。這幾個核心概念是與Storm運算相關的，由於上節課關於單詞計數的實例實在單機環境下通過

Tomcat7 session同步集群搭建

centos7.2 tomcat7 session 同步集群搭建Tomcat session同步集群搭建一、如何保持session會話為了使web能適應大規模的訪問，需要實現應用的集群部署。集群最有效的方案就是負載均衡，而實現負載均衡用戶每一個請求都有可能被分配到不固定的服務器上，這樣我們首先要解決sess

Kafka集群搭建

pic 配置環境變量 處理 jdk1.8 將他 版本 線程 partition connect 本文安裝環境 　　操作系統：CentOS6.7 64位 　　JDK版本：jdk1.8.0_131（要求JDK1.8以上） 　　ZooKeeper版本：3.4.8 　　Ka

【原創 Hadoop&Spark 動手實踐 5】Spark 基礎入門，集群搭建以及Spark Shell

min util man 操作 because tro txt library all Spark 基礎入門，集群搭建以及Spark Shell 主要借助Spark基礎的PPT，再加上實際的動手操作來加強概念的理解和實踐。

Hadoop集群搭建(非HA)

圖形界面 網絡模式 jdk 初始 hadoop2 orm 一個 程序猿 添加 1.準備Linux環境 1.0先將虛擬機的網絡模式選為NAT 1.1修改主機名 vi /etc/sysconfig/network NETWORKING=yes HOSTNAME=i

Elasticsearch 5.3 集群搭建

elkes-node1cluster.name: es-clusternode.name: es-node1network.host: 10.10.45.200http.port: 8201transport.host: 10.10.45.200transport.tcp.port: 8301bootstra

redis集群搭建與管理

ots waiting alloc 必須 停止 port 明顯 das evel 集群簡介： Redis 集群是一個可以在多個 Redis 節點之間進行數據共享的設施（installation）。 Redis 集群不支持那些需要同時處理多個鍵的 Redis 命令， 因為

redis集群搭建

目錄 計算 sta filename tin aof global tsl policy 一、redis集群說明 集群采用一主三從，總共3主9從，總共12臺，每個機房中放置一主三從 每個機房中放置其他機房的一從，達到高可用性 二、集群搭建 1.redis集群的搭建

redis 集群搭建

redis##redis 官網： https://redis.io#redis 文檔：https://redis.io/documentation#redis 集群：https://redis.io/topics/cluster-tutorial##軟件下載[[email protected]/*

zookeeper集群搭建

ubuntu cluster zookeeper 簡介 Zookeeper 分布式服務框架是Apache Hadoop的一個子項目它主要是用來解決分布式應用中經常遇到的一些數據管理問題如統一命名服務、狀態同步服務、集群管理、分布式應用配置項的管理等等。zookeeper本身可以單節點狀態運行

MySQL優化之——集群搭建步驟具體解釋

兩個 chgrp 應用服務 集群搭建 ria 進程 ini 而且 必須 轉載請註明出處:http://blog.csdn.net/l1028386804/article/details/46833179 1 概述 MySQL Cluster 是MySQL 適合於

WAS集群系列（5）：集群搭建：步驟3：安裝IHS軟件

line col jsb eight none data 相關 blog mil 選擇“安裝IBM HTTPServer”選項，點擊“安裝向導”。例如以下圖提示： 安裝提示，逐步點擊“下一步”，當中偶有幾處細節註意就可以。列舉例如以下： （1）、產品安裝路徑與先

《CDH集群搭建視頻資料》百度雲網盤下載

百度 eight 鏈接 百度雲 bsp col 密碼 tar 視頻資料 《CDH集群搭建視頻資料》百度雲下載 鏈接： http://pan.baidu.com/s/1i5DVBlb 密碼：2mny《CDH集群搭建視頻資料》百度雲網盤下載

CDH集群搭建步驟

hadoop cdh hbase hive CDH集群搭建步驟詳細文檔 一、關於CDH和Cloudera ManagerCDH (Cloudera‘s Distribution,including Apache Hadoop)，是Hadoop眾多分支中的一種，由Cloudera維護，基於穩定