2. 程式人生 > >企業 - MySQL主從備份

企業 - MySQL主從備份

阿新 • • 發佈：2018-03-07
mysql 主從備份

一、mysql主從備份原理

一、雙機熱備的概念簡單說一下，就是要保持兩個數據庫的狀態自動同步。對任何一個數據庫的操作都自動應用到另外一個數據庫，始終保持兩個數據庫中的數據一致。 這樣做有如下幾點好處：

1. 可以做災備，其中一個壞了可以切換到另一個。

2. 可以做負載均衡，可以將請求分攤到其中任何一臺上，提高網站吞吐量。 對於異地熱備，尤其適合災備。

二、mysql 主從備份工作原理

簡單的說就是把 一個服務器上執行過的sql語句在別的服務器上也重復執行一遍， 這樣只要兩個數據庫的初態是一樣的，那麽它們就能一直同步。

二、實現方式

MYSQL主從同步是在MySQL主從復制（Master-Slave Replication

）基礎上實現的，通過設置在Master上的binlog，使其處於打開狀態；Slave通過一個I/O線程從Master上讀取binlog，然後傳輸到Slave的中繼日誌中，然後使用SQL線程讀取中繼日誌，並應用到自身數據庫中，從而實現主從數據同步功能。


有兩個服務器，演示了從一個主服務器（master）把數據同步到從服務器（slave）的過程。

對於一個mysql服務器，一般有兩個線程來負責復制和被復制。當開啟復制這個開關之後（start slave）

1. 作為主服務器Master，會把自己的每一次改動都記錄到 二進制日誌 Binarylog 中。 （從服務器會負責來讀取這個log，然後在自己那裏再執行一遍。）

2. 作為從服務器Slave，會用master上的賬號登陸到master上，去讀取master的Binarylog, 然後寫入到自己的中繼日誌Relaylog，然後自己的sql線程會負責讀取這個中繼日誌，並執行一遍。到這裏主服務器上的更改就同步到從服務器上了。

在mysql上可以查看當前服務器的主，從狀態。 其實就是當前服務器的 Binary（作為主服務器角色）狀態和位置。以及其RelayLog（作為從服務器）的復制進度。


三、復制的過程

技術分享圖片



該過程的第一部分就是master記錄二進制日誌。在每個事務更新數據完成之前，master在二日誌記錄這些改變。MySQL將事務串行的 寫入二進制日誌，即使事務中的語句都是交叉執行的。在事件寫入二進制日誌完成後，master通知存儲引擎提交事務。 下一步就是slave將master的binary log拷貝到它自己的中繼日誌。首先，slave開始一個工作線程——I/O線程。I/O線程在master上打開一個普通的連接，然後開始binlog dump process。Binlog dump process從master的二進制日誌中讀取事件，如果已經跟上master，它會睡眠並等待master產生新的事件。I/O線程將這些事件寫入中 繼日誌。 SQL slave thread（SQL從線程）處理該過程的最後一步。SQL線程從中繼日誌讀取事件，並重放其中的事件而更新slave的數據，使其與master中的數 據一致。只要該線程與I/O線程保持一致，中繼日誌通常會位於OS的緩存中，所以中繼日誌的開銷很小。 此外，在master中也有一個工作線程：和其它MySQL的連接一樣，slave在master中打開一個連接也會使得master開始一個線程。復制 過程有一個很重要的限制——復制在slave上是串行化的，也就是說master上的並行更新操作不能在slave上並行操作。


實驗

實驗環境

server2 master

server3 slave


master上下載包

mysql-5.7.17-1.el6.x86_64.rpm-bundle.tar

安裝數據庫

[root@server2~]# yum install -y mysql-community-client-5.7.17-1.el6.x86_64.rpm mysql-community-common-5.7.17-1.el6.x86_64.rpm mysql-community-libs-5.7.17-1.el6.x86_64.rpm mysql-community-libs-compat-5.7.17-1.el6.x86_64.rpm mysql-community-server-5.7.17-1.el6.x86_64.rpm


技術分享圖片

[root@server3 ~]# yum install -y *



修改mysql的配置文件

[root@server2 ~]# vim /etc/my.cnf

server-id = n

給服務器分配一個唯一的ID編號


log-bin [= filename]

把對數據進行修改的所有SQL命令(也就是INSERT、UPDATE和DELETE命令)以二進制格式記入日誌(二進制變更日誌，binary update log)。這種日誌的文件名是filename.n或默認的hostname.n，其中n是一個6位數字的整數(日誌文件按順序編號)。


技術分享圖片

開啟服務


技術分享圖片

技術分享圖片


修改slave配置文件

server-id = n

給服務器分配一個唯一的ID編號

[root@server3 ~]# vim /etc/my.cnf

技術分享圖片

開啟服務

技術分享圖片



查看密碼

技術分享圖片


安全配置向導

技術分享圖片



技術分享圖片


技術分享圖片


如下方法修改slave密碼

mysql> alter user root@localhost identified by 'LH=redhat123';

技術分享圖片

master上進行授權

mysql> grant replication slave on *.* to cara@'192.168.122.13' identified by 'LH@redhat123' ； 用戶授權

mysql> flush privileges; 刷新

技術分享圖片

master授權後，slave可以遠程登錄


技術分享圖片


master端查看

技術分享圖片



使 slave 與 master 建立連接，從而同步：
mysql> change master to master_host='192.168.122.12',master_user='cara',master_password='LH=redhat123',master_log_file='mysql-bin.000003',master_log_pos=1706;

slave端 mysql -p 登錄

技術分享圖片


查看

[root@server3 mysql]# pwd
/var/lib/mysql
[root@server3 mysql]# cat master.info

技術分享圖片

[root@server3 mysql]# cat server3-relay-bin.index

技術分享圖片


mysql> show slave status\G; 查看slave狀態

技術分享圖片




mysql> start slave; 開啟slave

技術分享圖片


創建庫westos,創建表usertb

技術分享圖片


在表中插入數據

技術分享圖片


更改密碼

技術分享圖片


刪除表中數據

技術分享圖片



[root@server2 mysql]# mysqlbinlog mysql-bin.000003 可查看master所做的操作


技術分享圖片



在slave上也可查看master上數據

技術分享圖片


技術分享圖片


深入了解復制-全局事務標識符（GTID）

1）什麽是GTID

GTID(Global Transaction ID)是對於一個已提交事務的編號，並且是一個全局唯一的編號。GTID實際上是由UUID+TID組成的。其中UUID是一個MySQL實例的唯一標 識，保存在mysql數據目錄下的auto.cnf文件裏。TID代表了該實例上已經提交的事務數量，並且隨著事務提交單調遞增。下面是一個GTID的具 體形式：3E11FA47-71CA-11E1-9E33-C80AA9429562:23。

2）GTID的作用

根據GTID可以知道事務最初是在哪個實例上提交的

GTID的存在方便了Replication的Failover

3）GTID比傳統復制的優勢

更簡單的實現failover，不用以前那樣在需要找log_file和log_Pos。

更簡單的搭建主從復制。

比傳統復制更加安全。

GTID是連續沒有空洞的，因此主從庫出現數據沖突時，可以用添加空事物的方式進行跳過。

4）GTID的工作原理：

master更新數據時，會在事務前產生GTID，一同記錄到binlog日誌中。

slave端的i/o線程將變更的binlog，寫入到本地的relay log中。

sql線程從relay log中獲取GTID，然後對比slave端的binlog是否有記錄。

如果有記錄，說明該GTID的事務已經執行，slave會忽略。

如果沒有記錄，slave就會從relay log中執行該GTID的事務，並記錄到binlog。

在解析過程中會判斷是否有主鍵，如果沒有就用二級索引，如果沒有就用全部掃描。


先關掉slave

技術分享圖片

修改配置文件/etc/my.cof

master

技術分享圖片

slave

技術分享圖片

重啟服務

技術分享圖片

技術分享圖片

更錄數據庫，查看


master

技術分享圖片


技術分享圖片

技術分享圖片


slave

技術分享圖片

技術分享圖片



技術分享圖片

change master to master_host='192.168.122.12',master_user='cara',master_password='LH=redhat123',master_auto_position=1;

技術分享圖片

技術分享圖片


--------------------------------------------------------------------master端--------------------------------------------------------------------

技術分享圖片

技術分享圖片

--------------------------------------------------------------------slave端--------------------------------------------------------------------

技術分享圖片

技術分享圖片


技術分享圖片


技術分享圖片




企業 - MySQL主從備份

相關推薦

企業 - MySQL主從備份

mysql 主從備份一、mysql主從備份原理一、雙機熱備的概念簡單說一下，就是要保持兩個數據庫的狀態自動同步。對任何一個數據庫的操作都自動應用到另外一個數據庫，始終保持兩個數據庫中的數據一致。 這樣做有如下幾點好處：1. 可以做災備，其中一個壞了可以切換到另一個。2. 可以做負載均衡，可以將請求分攤到其中任

Linux的企業-Mysql主從同步，Gtid，半同步

mysql 半同步 gtid 一.Mysql主從同步MySQL 支持單向、異步復制,復制過程中一個服務器充當主服務器,而一個或多個其它服務器充當從服務器。主服務器將更新寫入二進制日誌文件,並維護文件的一個索引以跟蹤日誌循環。這些日誌可以記錄發送到從服務器的更新。當一個從服務器連接主服務器時,它通知

mysql主從備份及常見問題處理

top 存在 是否 table read 應用 and 常見問題 png 1.mysql主從備份基本原理 mysql支持單向、異步復制，復制過程中一個服務器充當主服務器，而一個或多個其它服務器充當從服務器。mysql復制基於主服務器在二進制日誌中跟蹤所有對數據庫的更

MySQL主從備份配置實例

reat 變化 出現問題 二進制日誌 my.cnf配置 counter 文件名 alter 特定 場景: 1、主服務器192.168.0.225、從服務器192.168.0.226。其中，主服務器上已有數據。 2、主從服務器上的mysql版本及安裝配置相同。 一

mysql主從備份切換

分享一下我老師大神的人工智慧教程！零基礎，通俗易懂！http://blog.csdn.net/jiangjunshow 也歡迎大家轉載本篇文章。分享知識，造福人民，實現我們中華民族偉大復興！        

Mysql 主從備份完整版

MYSQL 主從配置有很多好處，一個是起著實時備份的作用，另外一個也可以讀寫分離，減輕網站的負載，baidu出來的很多配置其實很有問題，在這裡重新梳理一下，首先了解一下原理。   該過程的第一部分就是master記錄二進位制日誌。在每個事務更新資料完成之前，master在

MySQL主從備份設定

功能需求 外網伺服器，有獨立IP；內網伺服器，無獨立IP；外網伺服器的MYSQL資料庫實時更新，並要求同步到內網伺服器中。 該需求可使用MYSQL的主從備份實現，其中外網伺服器為主伺服器（Master），內網伺服器為從伺服器（Slave）。 實現方式

mysql主從備份Slave_IO_Running:No的解決方法

情況一： 在備機的mysql上執行：show slave status \G 發現Slave_SQL_Running: No       Last_Errno: 1146       Last_Error: Error 'Table 'opaq_151.vehicle_new

MySQL 主從備份

1：檢查mysql master 配置;     #先檢視master server-id:           命令：show variables like 'server_id';     #檢視master log_bin 是否開起             命令：sho

linux下 mysql主從備份

帳號 滿足 popu pass ext 地址 ont 建立數據庫 版本號 版權聲明：本文為博主原創文章，未經博主同意不得轉載。 https://blog.csdn.net/czh0423/

學一點 mysql 雙機異地熱備份----快速理解mysql主從，主主備份原理及實踐

server counter ror 位置 正在 大型 主循環 備份 配置詳解 雙機熱備的概念簡單說一下，就是要保持兩個數據庫的狀態自動同步。對任何一個數據庫的操作都自動應用到另外一個數據庫，始終保持兩個數據庫數據一致。 這樣做的好處多。 1. 可以做災備，其中一個壞了可

05： 實時增量備份 、 XtraBackup 備份 、 總結和答疑 、 MySQL 主從同步

lte per xtra 使用 pos posit 完全備份 一次 信息 day05 增量備份一、啟用binlog日誌 實現 實時增量備份二、使用第3方軟件提供的命令做增量備份 +++++++++++++++++++++++++++++++++一、啟用binlog日誌 實

mysql 主從時時備份

mysql mysql主從時時備份 2.7、Mysql 主從備份1、mysql 主備結構：Master：Mysql主節點，Master接收到來自Slave的 IO進程請求後，通過負責復制的IO進程請求信息讀取制定日誌指定位置之後的日誌信息，返回給Slave的IO進程。返回信息中除了日誌所包含的信息之外

mysql 的主從備份

圖 master master 新增使用者 mysql>grant replication slave on *.* to 'repl'@'%' identified by 'repl'; mysql>flush privileges;

mysql主從雙機複製備份

由於從機不知道為什麼配置了環境變數也不能在從機的mysql資料夾下敲mysql命令，所以以下操作都在Navicat下完成，如果使用mysql命令也是可以的 1.檢查主從伺服器之間是否互通，如果單一的主從複製不是主主複製，只需要主通從即可，（也可以用Navicat進行資料庫連線進行測試，從機能連上主機就可以主

mysql主從複製及資料備份恢復

1、主從伺服器分別作以下操作： 1.1、版本一致 1.2、初始化表，並在後臺啟動mysql 1.3、修改root的密碼 2、修改主伺服器master: #vi /etc/my.cnf [mysqld

Mysql單機多例項及主從備份設定

準備Slave資料庫 新建目錄，如：mysql3307，做為Slave資料庫的目錄。 複製Master Mysql目錄下的share目錄到mysql3307下。 在mysql3307目錄下建立data目錄，並複製Master Mysql的data下的mysq

mysql 主從replication備份

mysql可以用bin日誌實現熱備資料。原理是一個主節點，多個從節點，資料寫只能寫到主節點上，主節點開啟了bin日誌，從節點有一個定時的任務從主節點複製bin日誌到本機，然後執行bin日誌中的sql。記錄下操作步驟：1、主節點：建立一個備份的賬號；2、主節點：flush ta

mysql 雙機異地熱備份----快速理解mysql主從，主主備份原理及實踐

雙機熱備的概念簡單說一下，就是要保持兩個資料庫的狀態自動同步。對任何一個數據庫的操作都自動應用到另外一個數據庫，始終保持兩個資料庫資料一致。 這樣做的好處多。 1. 可以做災備，其中一個壞了可以切換到另一個。 2. 可以做負載均衡，可以將請求分攤到其中任何一臺上，提高網站

mysql的主從備份和雙機互備實現

雙機互備和熱備的區別：        互備所指的是backup,保證資料的完整性而做的備份。主要目的是防止資料丟失。       熱備是為了保證應用的連續性。利用故障轉移的方法實現。     Linux下實現的雙機互備：  主從備份： 1、設定同步Master 修改