詳解MySQL的主從複製、讀寫分離、備份恢復
詳解MySQL的主從複製、讀寫分離、備份恢復
一、MySQL主從複製
1、簡介
我們為什麼要用主從複製?
主從複製目的:
- 可以做資料庫的實時備份,保證資料的完整性;
- 可做讀寫分離,主伺服器只管寫,從伺服器只管讀,這樣可以提升整體效能。
原理圖:
從上圖可以看出,同步是靠log檔案同步讀寫完成的。
2、更改配置檔案
兩天機器都操作,確保 server-id 要不同,通常主ID要小於從ID。一定注意。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 |
# 3306和3307分別代表2臺機器
# 開啟log-bin,並使server-id不一樣 #vim /data/3306/my.cnf
log-bin = /data/3306/mysql-bin
server-id = 1
#vim /data/3307/my.cnf
log-bin = /data/3307/mysql-bin
server-id = 3
#檢查
1、
[root@bogon ~]# egrep "log-bin|server-id" /data/3306/my.cnf
log-bin = /data/3306/mysql-bin
server-id = 1
[root@bogon ~]# egrep "log-bin|server-id" /data/3307/my.cnf
log-bin = /data/3307/mysql-bin server-id = 3
2、
[root@localhost ~]# mysql -uroot -p -S /data/3306/mysql.sock -e "show variables like 'log_bin';"
Enter password:
+--------+--------+
| Variable_name | Value |
+--------+--------+
| log_bin | ON | # ON 為開始開啟成功
+--------+--------+
|
3、建立用於從庫複製的賬號rep
通常會建立一個用於主從複製的專用賬戶,不要忘記授權。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 |
# 主庫授權,允許從庫來連線我取日誌
[root@localhost ~]# mysql -uroot -p -S /data/3306/mysql.sock
Enter password:
# 允許從庫192.168.200網段連線,賬號rep,密碼nick。
mysql> grant replication slave on *.* to 'rep'@'192.168.200.%' identified by 'nick';
Query OK, 0 rows affected (0.00 sec)
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)
# 檢查建立的rep賬號:
mysql> select user,host from mysql.user;
+-----+-------------+
| user | host |
+-----+--------------+
| root | 127.0.0.1 |
| rep | 192.168.200.% |
| root | localhost |
| root | localhost.localdomain |
+-----+------------------+
7 rows in set (0.00 sec)
|
4、備份主庫,及恢復到從庫
把主庫現有資料備份下來,再恢復到從庫,此時兩個主機的資料一致。
如果事先有資料的話,這不不能忘。
1)在主庫上加鎖,使只有只讀許可權。
1 2 3 4 5 |
mysql> flush table with read lock;
Query OK, 0 rows affected (0.00 sec)
#5.1、5.5鎖表命令略有不同。
# 5.1鎖表:flush tables with read lock;
# 5.5鎖表:flush table with read lock;
|
2)記住就是這個點備份的。
1 2 3 4 5 6 7 |
mysql> show master status;
+-------+------+--------+---------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+-------+------+--------+---------+
| mysql-bin.000013 | 410 | | |
+-------+------+--------+---------+
1 row in set (0.00 sec)
|
3)克隆視窗,備份資料。
1 2 3 4 5 6 |
[root@bogon ~]# mysqldump -uroot -p -S /data/3306/mysql.sock -A -B --events --master-data=2|gzip >/opt/rep.sql.gz
Enter password:
引數: -A:備份所有的
#看rep.sql.gz引數
vim /opt/rep.sql.gz
-- CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.000013', MASTER_LOG_POS=410;
|
4)檢視master status;數值是否正常。
1 2 3 4 5 6 7 |
mysql> show master status;
+------+------+---------+-------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+-------+-----+---------+--------+
| mysql-bin.000013 | 410 | | |
+--------+----+---------+--------+
1 row in set (0.00 sec)
|
5)解鎖庫
1 2 |
mysql> unlock tables;
Query OK, 0 rows affected (0.00 sec)
|
6)恢復到從庫
1 2 |
[root@bogon ~]# gunzip < /opt/rep.sql.gz | mysql -uroot -p -S /data/3307/mysql.sock
Enter password:
|
5、配置從庫及生效
更改從庫和主庫的連線引數,配置生效。檢查就成功了!
1)進入從庫。
1 2 |
[root@bogon ~]# mysql -uroot -p -S /data/3307/mysql.sock
Enter password:
|
2)更改從屬伺服器用於與主伺服器進行連線和通訊的引數。
1 2 3 4 5 6 7 8 |
mysql> CHANGE MASTER TO
MASTER_HOST='192.168.200.98',
MASTER_PORT=3306,
MASTER_USER='rep',
MASTER_PASSWORD='nick',
MASTER_LOG_FILE='mysql-bin.000013',
MASTER_LOG_POS=410;
Query OK, 0 rows affected (0.01 sec)
|
3)檢視更改的引數。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 |
[root@localhost ~]# cd /data/3307/data/
[root@localhost data]# cat master.info
18
mysql-bin.000013
410
192.168.200.98
REP
nick
3306
60
0
0
1800.000
0
|
4)生效!
1 2 |
mysql> start slave;
Query OK, 0 rows affected (0.01 sec)
|
5)檢查下列引數,符合則正常!
1 2 3 4 5 |
mysql> show slave status\G
Relay_Master_Log_File: mysql-bin.000013
Slave_IO_Running: Yes #取logo。
Slave_SQL_Running: Yes #讀relay-bin、logo,寫資料。
Seconds_Behind_Master: 0 #落後主庫的秒數。
|
6)檢視relay-bin.logo。
1 2 3 4 5 6 7 8 9 10 11 12 13 |
[root@localhost 3307]# cd /data/3307
[root@localhost 3307]# ll
總用量 48
drwxr-xr-x. 9 mysql mysql 4096 10月 29 18:52 data
-rw-r--r--. 1 mysql mysql 1900 10月 29 11:45 my.cnf
-rwx------. 1 root root 1307 10月 20 17:06 mysql
-rw-rw----. 1 mysql mysql 6 10月 29 11:00 mysqld.pid
-rw-r-----. 1 mysql mysql 15090 10月 29 18:49 mysql_nick3307.err
srwxrwxrwx. 1 mysql mysql 0 10月 29 11:00 mysql.sock
-rw-rw----. 1 mysql mysql 150 10月 29 18:49 relay-bin.000001
-rw-rw----. 1 mysql mysql 340 10月 29 18:52 relay-bin.000002
-rw-rw----. 1 mysql mysql 56 10月 29 18:49 relay-bin.index
-rw-rw----. 1 mysql mysql 53 10月 29 18:52 relay-log.info
|
7)檢視relay-log.info。
1 2 3 4 5 |
[root@localhost 3307]# cat relay-log.info
/data/3307/relay-bin.000002
340
mysql-bin.000013
497
|
8)檢視master.info。
1 2 3 4 5 6 7 8 9 10 11 12 13 |
[root@localhost 3307]# cat data/master.info
18
mysql-bin.000013
497
192.168.200.98
rep
nick
3306
60
0
0
1800.000
0
|
6、讀寫分離
讀寫分離在生產環境比比皆是,也是必備技能。
忽略MySQL主從複製授權表同步,讀寫分離。
1 2 3 4 5 6 7 |
[root@bogon 3306]# vim my.cnf
#新增以下四行
replicate-ignore-db = mysql
binlog-ignore-db = mysql
binlog-ignore-db = performance_schema
binlog-ignore-db = information_schema
server-id = 1
|
1)通過read-only引數防止資料寫入從庫的方法。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 |
#修改配置檔案。
vim /data/3307/my.cnf
[mysqld]
read-only
#對使用者授權事不能指定有super或all privileges許可權。不然沒效果。
#建立賬戶suoning,並重新整理許可權。
mysql> grant select,insert,update,delete on *.* to 'suoning'@'localhost' identified by '123';
Query OK, 0 rows affected (0.00 sec)
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)
#用建立賬戶登入,並建立庫
[root@bogon 3307]# mysql -usuoning -p123 -S /data/3307/mysql.sock
mysql> create user kangkangkang@'192.%' identified by 'old123';
ERROR 1290 (HY000): The MySQL server is running with the --read-only option so it cannot execute this statement
|
2)主從同步故障
1 2 3 4 5 6 7 8 |
A. Last_SQL_Errno: 1007
stop slave;
set global sql_slave_skip_counter = 1;
start slave;
B.忽略
skip-name-resolve #忽略名字解析
slave-skip-errors = 1032,1062,1007 #忽略故障編號
server-id = 3
|
3)從庫開啟bin-log
1 2 3 4 |
vim my.cnf
log-bin = /data/3307/mysql-bin
log-slave-updates #表示從庫記錄bin-log
expire_logs_days = 7 #保留7天bin-log。
|
7、主宕機
我們來模擬一下,如果主機宕機了,那我們該如何讓從快速替換,讓損失降到最小?當然了,雙機熱備也是一個不錯的選擇,那下節會給大家講解。
一主多從的環境下,如果主宕機了,選一臺從做主,繼續和其它從同步。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 |
A.檢視每個從庫的master.info,看誰的更靠前,最新,更大,丟的資料最少。
[root@localhost 3307]# cat /data/3307/data/master.info
mysql-bin.000015
326
B.確保所有relay log全部更新完畢。
在每個從庫上執行stop slave io_thread;show processlist;
知道看到Has read all relay log;表示從庫更新都執行完畢。
C.登陸mysql -uroot -p -S /data/3307/mysql.sock
stop slave;
reset master;
quit
D.進入到資料庫目錄,刪除master.info relay-log.info
cd /data/3307/data/
rm -f master.info relay-log.info
E. 3307提升為主庫
vim /data/3307/my.cnf
開啟log-bin = /data/3307/mysql-bin
如存在log-slave-updates,read-only等一定要註釋。
/data/3307/mysql restart
F.其它從庫操作
stop slave;
change master to master_host ='192.168.200.98';
start slave;
show slave status\G
|
8、雙主
使用主主前提:表的主鍵自增。
雙主情況下,ID會是這樣情況,通過程式指定ID寫庫M1:1,3,5,M2:2,4,6。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 |
[root@localhost 3307]# vim my.cnf
[mysqld]
auto_increment_increment = 2
auto_increment_offset = 2
[root@localhost 3307]# ./mysql restart
[root@localhost 3306]# vim my.cnf
[mysqld]
auto_increment_increment = 2
auto_increment_offset = 1
log-bin = /data/3306/mysql-bin
log-slave-updates
[root@localhost 3306]# ./mysql restart
[root@localhost 3306]# mysqldump -uroot -pnick -S /data/3307/mysql.sock -A -B --master-data=1 -x --events > /opt/3307bak.sql
[root@localhost 3306]# mysql -uroot -pnick -S /data/3306/mysql.sock < / opt /3307bak.sql
mysql> CHANGE MASTER TO
MASTER_HOST='192.168.200.98',
MASTER_PORT=3307,
MASTER_USER='rep',
MASTER_PASSWORD='nick';
mysql> start slave;
Query OK, 0 rows affected (0.00 sec)
mysql> show slave status \G
|
二、MySQL備份及恢復
1、備份單個數據庫
最基礎的備份單個數據庫。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 |
1>語法:mysqldump –u 使用者名稱 –p 資料庫名> 備份的資料庫名
2>備份nick_defailt資料庫,檢視內容。
[root@localhost ~]# mysqldump -uroot -p -B nick_defailt >/opt/mysql_nick_defailt.bak
Enter password:
[root@localhost ~]# egrep -v "#|\*|--|^$" /opt/mysql_nick_defailt.bak
DROP TABLE IF EXISTS `oldsuo`;
CREATE TABLE `oldsuo` (
`id` int(4) NOT NULL,
`name` char(20) NOT NULL,
`age` tinyint(2) NOT NULL DEFAULT '0',
`dept` varchar(16) DEFAULT NULL
) ENGINE=MyISAM DEFAULT CHARSET=latin1;
LOCK TABLES `oldsuo` WRITE;
INSERT INTO `oldsuo` VALUES (2,'ç´¢å®',0,NULL),(3,'索尼',0,NULL),(4,'底底',0,NULL);
UNLOCK TABLES;
DROP TABLE IF EXISTS `student`;
CREATE TABLE `student` (
`qq` varchar(15) DEFAULT NULL,
`id` int(4) NOT NULL AUTO_INCREMENT,
`name` char(20) NOT NULL,
`suo` int(4) DEFAULT NULL,
`age` tinyint(2) NOT NULL DEFAULT '0',
`dept` varchar(16) DEFAULT NULL,
`sex` char(4) DEFAULT NULL,
PRIMARY KEY (`id`),
KEY `index_name` (`name`)
) ENGINE=MyISAM AUTO_INCREMENT=8 DEFAULT CHARSET=latin1;
LOCK TABLES `student` WRITE;
INSERT INTO `student` VALUES (NULL,2,'oldsuo',NULL,0,NULL,NULL),(NULL,3,'kangknag',NULL,0,NULL,NULL),(NULL,4,'kangkang',NULL,0,NULL,NULL),(NULL,5,'oldsuo',NULL,0,NULL,NULL),(NULL,6,'kangknag',NULL,0,NULL,NULL),(NULL,7,'kangkang',NULL,0,NULL,NULL);
UNLOCK TABLES;
3>啟用壓縮備份資料庫
[root@localhost~]#mysqldump -uroot -p -B nick_defailt|gzip>/opt/mysql_nick_defailt.bak.gz
Enter password:
[root@localhost ~]# ll /opt/
總用量 28
-rw-r--r--. 1 root root 2109 10月 24 16:36 data_bak.sq2
-rw-r--r--. 1 root root 2109 10月 24 16:36 data_bak.sql
-rw-r--r--. 1 root root 1002 10月 27 11:55 mysql_nick_defailt.bak
-rw-r--r--. 1 root root 1002 10月 27 11:56 mysql_nick_defailt.bak.gz
-rw-r--r--. 1 root root 3201 10月 27 11:46 mysql_nick_defailt_B.bak
drwxr-xr-x. 2 root root 4096 11月 22 2013 rh
-rw-r--r--. 1 root root 1396 10月 24 16:11 student_bak.sql
4>恢復nick_defailt資料庫
[root@localhost ~]# mysql -uroot -p nick_defailt </ opt /mysql_nick_defailt.bak
Enter password:
#加-B恢復方法
[root@localhost ~]# mysql -uroot -p </opt/mysql_nick_defailt_B.bak
Enter password:
5>總結
1、備份用-B引數。增加use db,和create database的資訊。
2、用gzip對備份的資料壓縮。
|
2、備份多個數據庫
備份多個數據庫的情況呢?
1 2 3 |
#多個數據庫名中間加空格
[root@localhost ~]# mysqldump -uroot -p -B nick_defailt oldsuo oldsuo_1|gzip>/opt/mul.sql.gz
Enter password:
|
3、備份單個及多個表
那如果備份單個和多個表,怎麼辦?
1 2 3 4 5 6 |
1>語法:mysqldump -u 使用者名稱 -p 資料庫名 表名 > 備份的檔名
[root@localhost ~]# mysqldump -uroot -p nick_defailt student >/opt/mysql_nick_defailt_student.bak
Enter password:
2>語法:mysqldump -u 使用者名稱 -p 資料庫名 表名1 表名2 > 備份的檔名
[root@localhost ~]# mysqldump -uroot -p nick_defailt student oldsuo >/opt/mysql_nick_defailt.bak
Enter password:
|
4、mysqldump 的引數
mysqldump 的關鍵引數
1 2 3 4 5 6 7 8 9 10 |
-B指定多個庫,增加建庫語句和use語句。
--compact去掉註釋,適合除錯輸出,生產不用。
-A 備份所有庫。
-F重新整理binlog日誌。
--master-data 增加binlog日誌檔名及對應的位置點。
-x,--lock-all-tables
-l,--locktables
-d 只備份表結構
-t 只備份資料
--single-transaction 適合innodb事務資料庫備份。
|
5、增量恢復
重要的來了,生產環境一般是增量備份與恢復;所謂增量,就是在原資料的基礎上繼續新增資料,不必每次都重新新增,省時省力。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 |
A:增量恢復必備條件:
1.開啟MySQL資料庫log-bin引數記錄binlog日誌。
[root@localhost 3306]# grep log-bin /data/3306/my.cnf
log-bin = /data/3306/mysql-bin
2.存在資料庫全備。
B:生產環境 mysqldump備份命令:
# 進行資料庫全備,(生產環境還通過定時任務每日凌晨執行)
mysqldump -uroot -pnick -S /data/3306/mysql.sock --default-character-set=gbk --single-transaction -F -B nick |gzip >/server/backup/mysql_$(date +%F).sql.gz
# innodb引擎備份
mysqldump -u$MYUSER -p$MYPASS -S $MYSOCK -F --single-transaction -A -B |gzip >$DATA_FILE
# myisam引擎備份
mysqldump -u$MYUSER -p$MYPASS -S $MYSOCK -F -A -B --lock-all-tables |gzip >$DATA_FILE
C:恢復:
# 通過防火牆禁止web等應用向主庫寫資料或者鎖表。讓主庫暫時停止更新,然後再進行恢復。
# 誤操作刪除nick庫!
1.檢查全備及binlog日誌
[root@localhost 3306]# cd /server/backup/
[root@localhost backup]# gzip -d mysql_2015-10-31.sql.gz
[root@localhost backup]# vim mysql_2015-10-31.sql
[root@localhost backup]# grep -i "change" mysql_2015-10-31.sql
|
2.立即重新整理並備份出binlog
1 2 3 4 5 6 |
[root@localhost 3306]# mysqladmin -uroot -pnick -S /data/3306/mysql.sock flush-logs
[root@localhost 3306]# cp /data/3306/mysql-bin.000030 /server/backup/
#誤操作log-bin,倒數第二
[root@localhost backup]# mysqlbinlog -d nick mysql-bin.000030 >bin.sql #匯出為.sql格式。
[root@localhost backup]# vim bin.sql
找到語句drop database nick刪除!!!(誤操作語句)
|
3.恢復
1 2 3 4 |
[root@localhost backup]# mysql -uroot -pnick -S /data/3306/mysql.sock <mysql_2015-10-31.sql #恢復之前的資料庫全備
[root@localhost backup]# mysql -uroot -pnick -S /data/3306/mysql.sock nick < bin.sql
#恢復刪除誤操作語言的bin-log。
# 搞定!!!
|
以上就是本文的全部內容,希望本文的內容對大家的學習或者工作能帶來一定的幫助,同時也希望多多支援指令碼之家!
您可能感興趣的文章:
- 詳解MySQL主從複製讀寫分離搭建
- MySQL5.6 Replication主從複製(讀寫分離) 配置完整版
- MySQL主從複製的原理及配置方法(比較詳細)
- linux系統下實現mysql熱備份詳細步驟(mysql主從複製)
- Mysql主從複製(master-slave)實際操作案例
- MySQL的主從複製步驟詳解及常見錯誤解決方法
- MySQL主從複製配置心跳功能介紹
- MySQL主從同步、讀寫分離配置步驟
- mysql 讀寫分離(基礎篇)
- MySQL的使用中實現讀寫分離的教程
- mysql 讀寫分離(實戰篇)
- mysql主從複製讀寫分離的配置方法詳解
原文連結:http://dbaplus.cn/news-11-845-1.html