基於binlog恢復mysql資料庫
阿新 • • 發佈：2018-12-10
找到對應時間的binlog檔案
mysqlbinlog --no-defaults --base64-output=decode-rows -v -v /var/lib/mysql/mysql-bin.000538| sed -n '/### DELETE FROM `claim`.`claimcheck`/,/COMMIT/p'> /root/delete.txt
前言： 操作資料庫時候難免會因為“大意”而誤操作，需要快速恢復的話通過備份來恢復是不太可能的，因為需要還原和binlog差來恢復，等不了，很費時。這裡先說明下因為Delete 操作的恢復方法：主要還是通過binlog來進行恢復，前提是binlog_format必須是Row格式，否則只能通過備份來恢復資料了。方法：
mysqlbinlog --no-defaults --start-datetime='2012-12-25 14:56:00' --stop-datetime='2012-12-25 14:57:00' -vv mysql-bin.000001 > /home/zhoujy/restore/binlog.txt2.資料取出來之後，需要把資料解析反轉，原始資料：
### DELETE FROM test.me_info ### WHERE ### @1=2165974 /* INT meta=0 nullable=0 is_null=0 */ ### @2='1984:03:17' /* DATE meta=0 nullable=1 is_null=0 */ ### @3=NULL /* DATE meta=765 nullable=1 is_null=1 */ ### @4=2012-10-25 00:00:00 /* DATETIME meta=0 nullable=0 is_null=0 */ ### @5='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */ ### @6=0 /* TINYINT meta=0 nullable=1 is_null=0 */ ### @7='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */ ### @8=-1 (4294967295) /* INT meta=0 nullable=1 is_null=0 */ ### @9=0 /* MEDIUMINT meta=0 nullable=1 is_null=0 */ ### @10=NULL /* MEDIUMINT meta=0 nullable=1 is_null=1 */ ### @11=2 /* TINYINT meta=0 nullable=1 is_null=0 */ ### @12=0 /* TINYINT meta=0 nullable=1 is_null=0 */ ### @13='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */ ### @14='' /* VARSTRING(765) meta=765 nullable=1 is_null=0 */ ### @15=0 /* MEDIUMINT meta=0 nullable=1 is_null=0 */ ### @16=320 /* INT meta=0 nullable=1 is_null=0 */ …………………… …………………… ……………………
Row格式的binlog記錄的格式如上面所示，需要做的工作就是吧Delete的操作轉換成Insert操作，發上面的都是有一定規律的，並且需要注意的是：
1、欄位型別 DATETIME 日期。在日誌中儲存的格式為 @4=2012-10-25 00:00:00，需要將2012-10-25 00:00:00加上引號。
2、負數。在日誌中儲存的格式為 @1=-1 (4294967295)， -2(4294967294)，-3(4294967293)，需要將()裡面的資料去掉，只保留@1=-1。
3、轉義字符集。如：'s，\，等。 上面3點清楚之後，可以寫一個指令碼（水平有限，在提升中，寫的不好看）：
#!/bin/env python # -*- encoding: utf-8 -*- #------------------------------------------------------------------------------- # Name: restore_insert.py # Purpose: 通過Binlog恢復Delete誤操作資料 # Author: zhoujy # Created: 2012-12-25 # update: 2012-12-25 # Copyright: (c) Mablevi 2012 # Licence: zjy #------------------------------------------------------------------------------- def read_binlog(file,column_num): f=open(file) num = '@'+str(column_num) while True: lines = f.readline() if lines.strip()[0:3] == '###': lines=lines.split(' ',3) if lines[1] == 'DELETE' and lines[2] =='FROM': #該部分替換Delete為Insert lines[1] = "INSERT" lines[2] = 'INTO' lines[-1] = lines[-1].strip() if lines[1].strip() == 'WHERE': lines[1] = 'VALUES (' if ''.join(lines).find('@') <> -1 and lines[3].split('=',1)[0] <> num: #num為列數，要是小於最大的列數，後面均加, lines[3] = lines[3].split('=',1)[-1].strip() if lines[3].strip('\'').strip().find('\'') <> -1: lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','').replace('\'','\\\'') #這裡過濾掉轉義的字串 lines[3] = '\'' + lines[3] + '\',' elif lines[3].find('INT meta') <> -1: #過濾Int型別的欄位為負數後帶的（），正數不受影響 lines[3] = lines[3].split('/*')[0].strip() lines[3] = lines[3].split()[0] + ',' elif lines[3].find('NULL') <> -1: lines[3] = lines[3].split('/*')[0].strip() lines[3] = lines[3] + ',' else: lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','').replace('\'','\\\'') #這裡過濾掉轉義的字串 lines[3] = '\'' + lines[3].strip('\''' ') + '\',' if ''.join(lines).find('@') <> -1 and lines[3].split('=',1)[0] == num: #num為列數，要是小於最大的列數，後面均加); lines[3] = lines[3].split('=',1)[-1].strip() if lines[3].find('\'') <> -1: lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','').replace('\'','\\\'') #同上 lines[3] = '\'' + lines[3] + '\');' elif lines[3].find('INT meta') <> -1: #同上 lines[3] = lines[3].split('/*')[0].strip() lines[3] = lines[3].split(' ')[0] + ');' elif lines[3].find('NULL') <> -1: lines[3] = lines[3].split('/*')[0].strip() lines[3] = lines[3] + ');' else: lines[3] = lines[3].split('/*')[0].strip('\'').strip().strip('\'').replace('\\','').replace('\'','\\\'') #同上 lines[3] = '\'' + lines[3].strip('\''' ') + '\');' print ' '.join(lines[1:]) if lines == '': break if __name__ == '__main__': import sys read_binlog(sys.argv[1],sys.argv[2])
執行指令碼：方法:python 指令碼名 binlog檔案 欄位數目
|
|
命令列中的36 表示 需要還原的表的欄位有36個，效果：
INSERT INTO test.me_info
VALUES (
2123269,
'1990:11:12',
NULL,
2,
'',
0,
'',
-1,
0,
340800,
1,
0,
'',
……
……
1,
NULL
);最後還原：
mysql test < binlog.sql