2. 程式人生 > >XtraBackup備份恢復模擬實踐

XtraBackup備份恢復模擬實踐

阿新 • • 發佈：2018-07-28
x86 alter 故障描述 cno href color 連接 values 備份

XtraBackup是Percona公司開發的一款很好用的數據備份工具，支持對InnoDB引擎數據的熱備份，對MyISAM引擎的數據做備份時需要鎖表，詳細信息參見官網或其他資源。【XtracBackup官網】

1. 實驗環境

1.1 系統環境：

操作系統：CentOS 6.5 64位
主機地址：10.0.0.26
主機名：mysql01
mysql版本：mysql-5.6.36
XtraBackup版本：2.4.12

2. 軟件安裝

2.1 安裝mysql服務

MySQL服務詳細安裝過程請參考上一篇文章【慢查詢可視化介紹】
這裏需要註意的是，必須要開啟log-bin功能，而且日誌文件最好不要和數據文件放在同一個目錄，以免對實驗造成影響。下面是mysql的基本配置，如果缺少其中某一項則可能會出現報錯。

[mysqld]
basedir=/opt/mysql-5.6.36/
datadir=/opt/mysql/data
log-bin=/opt/mysql/log/mysql-bin
slow_query_log_file = /opt/mysql/log/slow.log

[client]
socket=/opt/mysql/tmp/mysql.sock

2.2 安裝XtraBackup工具

1、安裝XtraBackup的依賴：

wget -O /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-6.repo
yum -y install perl perl-devel libaio libaio-devel perl-Time-HiRes perl-DBD-MySQL

2、下載安裝XtraBackup：

wget https://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.4.12/binary/redhat/6/x86_64/percona-xtrabackup-24-2.4.12-1.el6.x86_64.rpm --no-check-certificate
yum -y localinstall percona-xtrabackup-24-2.4.12-1.el6.x86_64.rpm

3、檢查是否安裝成功：

[root@mysql01 data]# xtrabackup -v
xtrabackup: recognized server arguments: --datadir=/opt/mysql/data --log_bin=/opt/mysql/log/mysql-bin 
xtrabackup version 2.4.12 based on MySQL server 5.7.19 Linux (x86_64) (revision id: 170eb8c)

3. 生產案例描述

3.1 備份策略

某公司使用mysql數據庫作為生產環境，對數據庫的備份策略為全量+增量，具體如下：
1、每周六00:00通過XtraBackup進行一次數據全量備份

0 0 * *  6   full.sh

2、周日-周五每天01:00通過XtraBackup進行數據增備

0 1 * * 0-5  inc.sh

3、開啟binlog日誌功能

3.2 故障描述

在星期二的下午2點，某開發人員不小心誤刪了一張表，大概10GB左右，需要對該表進行恢復操作。在刪表到開始恢復的這段時間內，可能還在繼續對其他表進行寫入操作。

3.3 恢復思路

1、斷開數據庫的連接，以防止二次破壞
2、準備上周六全備，並--apply-log  redo-only
3、合並增量，周日、周一、--apply-log --redoonly 周二--apply-log
4、在測試庫恢復以上數據，數據的目前狀態應該周二淩晨1:00
5、需要恢復的數據狀態是下午2點鐘左右，從1點開始的binlog恢復到刪除之前那個events的position。
6、導出刪除的表，恢復到生產庫，驗證數據可用性、完整性。
7、啟動應用連接數據庫。

4. 實踐過程

4.1 環境模擬

1、創建備份相關目錄：

    mkdir /backup/xbackup/full    #<==全備目錄
    mkdir /backup/xbackup/inc1   #<==增備目錄1
    mkdir /backup/xbackup/inc2   #<==增備目錄2
    mkdir /backup/xbackup/inc3   #<==增備目錄3

2、創建數據庫和表：
創建數據庫test，在test下創建表test和SC。其中test是需要刪除的表，而SC是一直有數據寫入的表

create database test character set utf8 collate utf8_general_ci;
use test;
create table test(id int,name char(20),age int);
drop table SC;
create table SC(
SCid int(12) NOT NULL auto_increment COMMENT ‘主鍵‘,
Cno int(10) NOT NULL COMMENT ‘課程號‘,
Sno int(10) NOT NULL COMMENT ‘學號‘,
Grade tinyint(2) NOT NULL COMMENT ‘學生成績‘,
PRIMARY KEY (SCid)
)ENGINE=InnoDB DEFAULT CHARSET=utf8;

4.2 模擬數據寫入過程

時間規劃為2018-07-20（周五）----2018-07-24（周二）![]
1、模擬全備前數據寫入：

date -s 2018-07-20
insert into test values(1,‘小紅‘,11);
insert into test values(2,‘小黃‘,12);
INSERT INTO SC(Sno,Cno,Grade) values(0001,1001,1);

技術分享圖片
2、周六數據全備及之後數據寫入：

date -s 2018-07-21
innobackupex --user=root --password=123456 --no-timestamp /backup/xbackup/full/
date -s 08:00:00
insert into test values(3,‘小藍‘,13);
INSERT INTO SC(Sno,Cno,Grade) values(0002,1002,2);
commit;

技術分享圖片
3、周日1點進行增備（20180722）和增量數據模擬：

date -s 2018-07-22
date -s 01:00:00
innobackupex --user=root --password=123456 --incremental --no-timestamp --incremental-basedir=/backup/xbackup/full/ /backup/xbackup/inc1
date -s 14:00:00
insert into test values(4,‘小白‘,14);
INSERT INTO SC(Sno,Cno,Grade) values(0003,1003,3);
commit;

技術分享圖片
4、周一1點進行增備（20180723）和增量數據模擬：

date -s 2018-07-23
date -s 01:00:00
innobackupex --user=root --password=123456 --incremental --no-timestamp --incremental-basedir=/backup/xbackup/inc1/ /backup/xbackup/inc2
date -s 17:00:00
insert into test values(5,‘小黑‘,15);
INSERT INTO SC(Sno,Cno,Grade) values(0004,1004,4);
commit;

技術分享圖片
5、周二1點進行增備（20180724）和增量數據模擬：

date -s 2018-07-24
date -s 01:00:00
innobackupex --user=root --password=123456 --incremental --no-timestamp --incremental-basedir=/backup/xbackup/inc2/ /backup/xbackup/inc3
date -s 04:00:00
insert into test values(6,‘小黃‘,16);
INSERT INTO SC(Sno,Cno,Grade) values(0005,1005,5);
commit;

技術分享圖片

4.3 模擬刪除test表

在下午兩點的時候刪除表test，在此之後還繼續對其他表進行操作。

date -s 14:00:00
drop table test;
INSERT INTO SC(Sno,Cno,Grade) values(0006,1006,6);

技術分享圖片

5. 數據恢復

5.1 數據恢復準備

想要恢復數據，需要XtraBackup備份到星期二01:00點的數據，以及binlog在星期二01:00點之後到14:00這一段時間之類的數據。根據這兩部分的數據，即可恢復表刪除之前時間點的數據。
1、獲取XtraBackup到星期二01:00的完整數據：

innobackupex --apply-log --redo-only /backup/xbackup/full/
innobackupex --apply-log --redo-only --incremental-dir=/backup/xbackup/inc1 /backup/xbackup/full/
innobackupex --apply-log --redo-only --incremental-dir=/backup/xbackup/inc2 /backup/xbackup/full/
innobackupex --apply-log --incremental-dir=/backup/xbackup/inc3 /backup/xbackup/full/
innobackupex --apply-log /backup/xbackup/full/
詳細備份參數請參考官方文檔或其他資料。

2、確認binlog的起點：
在XtraBackup的備份文件xtrabackup_binlog_info中會記錄binlog的文件及起始位置。
技術分享圖片

3、確認DROP語句之前的binlog位置：

mysqlbinlog --start-position=3295 /opt/mysql/log/mysql-bin.000006 >> /tmp/tmp.sql
cat /tmp/tmp.sql

技術分享圖片
4、恢復成sql文件：
通過上面兩步，可以發現binlog的起始位置，以及DROP之前一個的結束位置。通過這兩個position可以生成從01:00開始到14:00這一段時間內的數據庫增量文件。

mysqlbinlog --start-position=3295 --stop-position=3782 /opt/mysql/log/mysql-bin.000006 > /tmp/recover.sql

5.2 數據恢復方案一

通過另外一臺測試庫恢復。將XtraBackup和binlog的恢復文件發送到另外一臺測試數據庫（10.0.0.27，mysql02），通過這臺測試數據庫將數據恢復到14:00的狀態，再通過mysqldump備份出test表，最終傳輸到mysql01將數據恢復。
1、傳輸備份文件到mysql02:

scp -rp /backup/xbackup/full/ [email protected]:/tmp/
scp -rp /tmp/recover.sql [email protected]:/tmp/

2、測試庫恢復XtraBackup數據：
再數據恢復之前，需要將測試庫的data目錄清空

innobackupex --copy-back /tmp/full/
chown -R mysql.mysql /opt/mysql/data/
/etc/init.d/mysqld start

技術分享圖片
3、測試庫恢復binlog數據：

source /tmp/recover.sql

技術分享圖片
到此，已恢復到了刪表前一個時間點的數據，這時我們將test表導出並恢復到正式庫即可。

mysqldump -uroot -p123456 test test > /tmp/test_test.sql
mysql -uroot -p123456 < /tmp/test_test.sql
刪除表恢復到刪除時間點過程結束！

5.3 數據恢復方案二

從XtraBackup抽取表文件恢復。相對於方案一來說，不需要恢復全部數據庫，也不需要再其他庫上進行恢復，但是此種方式需要清楚建表的結構。
1、導出表：
導出表是在備份的prepare階段進行的，因此，一旦完全備份完成，就可以在prepare過程中通過--export選項將某表導出了。
導出前：
技術分享圖片
導出表命令：

innobackupex --apply-log --export /backup/xbackup/full/
此命令會為每個innodb表的表空間創建一個以.exp結尾的文件，這些以.exp結尾的文件則可以用於導入至其它服務器。

導出後：可以看出多了表結構等兩個文件
技術分享圖片
2、創建相同結構的表並刪除此表的表空間：

create table test(id int,name char(20),age int);
alter table test.test discard tablespace;      #<==必須通過命令刪除，不能手動刪除文件

3、復制test.ibd和test.exp文件到數據目錄：

[root@mysql01 test]# pwd
/backup/xbackup/full/test
[root@mysql01 test]# cp test.ibd /opt/mysql/data/test/
[root@mysql01 test]# cp test.exp /opt/mysql/data/test/
[root@mysql01 test]# chown -R mysql.mysql /opt/mysql/data/test/*

4、使用命令導入表

alter table test import tablespace;

技術分享圖片
5、通過binlog恢復tests表01:00-14:00的增量數據
單表恢復只涉及到了test表，因此不需要其他表的數據，需要從recover.sql中過濾出test表

grep test /tmp/recover.sql > /tmp/test.sql
source /tmp/test.sql

技術分享圖片

5.4 兩種方案的比較

方案1

不需要知道原來的表結構，主庫也只需要source sql文件，但是需要恢復全部數據庫，並且需要在兩臺主機上傳輸數據，在數據量大的時候比較慢。

方案2

需要知曉表結構，相對來說更簡單快捷。

至此，XtraBackup備份及恢復實踐完畢！！！

XtraBackup備份恢復模擬實踐

相關推薦

XtraBackup備份恢復模擬實踐

x86 alter 故障描述 cno href color 連接 values 備份 XtraBackup是Percona公司開發的一款很好用的數據備份工具，支持對InnoDB引擎數據的熱備份，對MyISAM引擎的數據做備份時需要鎖表，詳細信息參見官網或其他資源。【Xtra

Xtrabackup備份恢復

mysql備份 mysql恢復 mysql增量備份 mysql Xtrabackup 完全備份+兩次增量備份 --> 新主機恢復 環境：　　CentOS7.4 x 2　　MariaDB-5.5.5　　zabbix數據　　EPEL源　　Xtrabackup工具包 一、兩臺主機分別安裝

xtrabackup備份恢復MySQL數據庫

服務 備份類型 file 提交 啟動數據庫 lis info done linux 1. 全量備份恢復： 查看原表內容： MariaDB [(none)]> select * from testdb.students; +----+------------+---

MySQL Percona XtraBackup 備份恢復之一 ---工作原理

一、前言 Percona XtraBackup（簡稱PXB）是 Percona 公司開發的一個用於 MySQL 資料庫物理熱備的備份工具，支援 MySQl（Oracle）、Percona Server

mysql的xtrabackup備份恢復基本操作

演示環境：作業系統：Linux-x86-64資料庫版本：5.7.19本次演示包括：xtrabackup軟體的安裝， 全量備份，增量備份，恢復 操作附：官方軟體及文件下載地址：https://www.percona.com/software/mysql-database/per

percona-XtraBackup備份恢復

3 XtraBackup使用手冊 3.1 使用innobackupex指令碼 innobackupex是perl指令碼對xtrabackup的封裝，和功能擴充套件。 3.1.1 備份預備工作 許可權和連線 xtrabackup需要連線到資料庫和datadir操作許可權。

mysql-學習-13-20170619-MySQL備份恢復-xtrabackup-2

soc tar pex cfa nod 遠程 表空間 tid doc mysql-學習-13-20170619-MySQL備份恢復-xtrabackup-2 【管理員】吳炳錫(82565387) 20:34:15基於xtrabackup的增備,只需要了解如果需要增備建

xtrabackup全備操作和誤刪備份恢復操作

href strong -h 正常 backup 如果 x86 dir 一致性 1.安裝percona源rpm -Uhv http://www.percona.com/downloads/percona-release/percona-release-0.0-1.x86_6

XtraBackup 備份與恢復實例講解

XtraBackupXtraBackup官網 www.percona.com 下載XtraBackup wget https://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.3.3/binary/redhat/6/i386/percona

Mysql中-Xtrabackup備份和恢復應用

images 選項 SQ oca memory 使用方法 doc 如果 def 關於Xtrabackup(又或innobackupex)的介紹，詳細參考官方文檔 Xtrabackup安裝指南 文件準備 [root@wuxiang11 ~]# cd percona-xtr

數據備份與恢復 XtraBackup備份工具

script 可用 database names ima max () hunk word 數據備份與恢復 XtraBackup備份工具 1 數據備份與恢復1.1 問題 本案例要求熟悉MySQL的備份與恢復，完成以下任務操作： 使用mysqldump備份數據庫 使用mysq

xtrabackup備份（MySQL備份）與恢復

xtrabackup備份（MySQL備份）與恢復 1. innobackupex引數選項 --no-timestamp: 不建立一個時間戳 --defaults-file=[MY.CNF] //指定配置檔案：只能從給定的檔案中讀取預設選項。 且必須作為命令列上的第一個選項；必須是一個真實的檔案，它不

Xtrabackup備份、還原、恢復Mysql操作大全

環境：CentOS 6.7  + Mysql 5.7.19 + Xtraback 2.4.8 innobackupex常用引數： --user=USER 指定備份使用者，不指定的話為當前系統使用者 --password=PASSWD

MySQL備份恢復工具Xtrabackup

  　　參考文件https://www.cnblogs.com/youkanyouxiao/p/8335173.html 　　 　　Xtrabackup介紹  　　 Xtrabackup是由percona開源的免費資料庫熱備份軟體，它能對InnoDB資料庫和XtraDB儲

備份恢復工具xtrabackup安裝和使用的記錄

一、安裝 提供的是在centos7上安裝的方法： 包下載： wget https://www.percona.com/downloads/percona-toolkit/2.2.6/RPM/percona-toolkit-2.2.6-1.noarch.rpm  (這個可能會用到，但我未使用到）

xtrabackup安裝部署配置 備份恢復

[[email protected] ~]# yum install http://www.percona.com/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm [[email&

xtrabackup 備份和恢復

　　　　　　　　　　　　　　　　　　該文章接上一篇文章： 核心方面： $ cat /etc/centos-release 　　CentOS Linux release 7.4.1708 (Core) $ uname -r 　　3.10.0-693.el7.x86_64 下載安裝xtrabackup：$ w

【MySQL】Xtrabackup備份及恢復指令碼

簡介： 此備份指令碼的策略是每週日和週三進去全備 其餘每天增量備份。 # 備份指令碼XtraBackup.sh： #!/bin/bash # filename : XtraBackup.sh # Author : wang da

xtrabackup全量、增量備份恢復mysql數據庫

多少 prepare crypt seq shutdown info 備份恢復 NPU locked 一. 全量備份恢復： 查看原表內容： MariaDB [(none)]> select * from testdb.students; +----+-------

創建RMAN備份 恢復目錄數據庫

efault 只讀表空間 table oracl files 最好 本地 let rac 這是前段時間給客戶做的RMAN備份策略，今天有時間整理出來，希望對大家有些幫助，如有不對的地方歡迎大家給予指點，謝謝！ 創建成恢復目錄數據庫 如果不是在本地配置RMAN 恢復目錄，