MySQL資料庫升級的一些"陷阱"
對於商業資料庫而言,資料庫升級是一個優先順序很高的事情,有版本升級路線圖,有相應的補丁,而且對於方案還有一系列的演練,顯然是一場硬仗。而在MySQL方向上,升級這件事情就被淡化了許多,好像只能證明它的存在而已,當然正是由於這種不重視,也讓我今天走了不少彎路。
一般來說,升級MySQL有兩類可行方案,一類是直接升級資料字典,在本機完成,整個過程會有離線操作,會對業務有中斷,第二種是通過高可用切換平滑實現,原理是搭建低版本到高版本的資料複製關係,這種方案優勢比較明顯,對於業務的侵入性最低,而且還可以提前驗證,更甚還可以做到平滑回退,當然第二種方案要做很多前期的準備工作。
今天處理的一套環境基於儲存和時長等因素使用的是第一種方法,整個流程如下:
1) mysqldump備份資料庫,備份檔案大約為120G
2) 停止MySQL 5.5資料庫
3) 修改資料庫埠重新啟動資料庫,比如從4308調整正為4318,使得遷移過程中避免其他業務連線的影響,驗證無誤後停庫
4)修改mysql_base路徑為5.7版本,修改/usr/bin/mysql等環境變數配置
5)替換配置檔案為5.7版本,在5.7模式下啟動資料庫
6)使用upgrade模式升級資料字典,命令如下:
mysql_upgrade --socket=/data/mysql_4306/tmp/mysql.sock --port=4308 -uroot -pxxxx
7) 檢查複核
整個過程看上去還OK,實際操作的時候漏洞百出。
1) mysqldump備份資料庫,備份檔案大約為120G,為了快速線上備份採用mysqldump,但是異常情況下的恢復效率是硬傷,所以此處不建議使用mysqldump備份,而是建議使用物理備份,甚至如果條件允許,直接使用冷備模式
2) 停止MySQL 5.5資料庫
3) 修改資料庫埠重新啟動資料庫,比如從4308調整正為4318,使得遷移過程中避免其他業務連線的影響,驗證無誤後停庫
4)修改mysql_base路徑為5.7版本,修改/usr/bin/mysql等環境變數配置
5)替換配置檔案為5.7版本,在5.7模式下啟動資料庫,這裡沒有注意ibdata的配置,運氣不好,碰上了一個奇葩配置,如下:
innodb_data_file_path = ibdata1:1000M;ibdata2:100M:autoextend
而原本的規範配置都是一個ibdata檔案,如下:
innodb_data_file_path = ibdata1:1G:autoextend,
導致資料庫啟動時報錯,提示ibdata檔案已經被損壞了。
6)使用upgrade模式升級資料字典,命令如下:
mysql_upgrade --socket=/data/mysql_4306/tmp/mysql.sock --port=4308 -uroot -pxxxx
upgrade這個命令的實現提示不夠友好,丟擲了一大堆的錯誤,但是最後竟然安慰我說,升級成功。問題到了這個階段的時候,其實已經比較難收場了,因為資料字典檔案損壞,導致升級資料字典的操作完全不可能,現在資料庫連裡面的表都desc不出來了
7) 檢查複核,本來輕輕鬆鬆收工的驗證工作現在變成了緊急修復工作。
後續的第一波補救措施如下:
8)使用已有的凌晨固定的物理備份恢復資料,大約為1個小時,mysqldump恢復果斷放棄,印象中至少得6個小時以上。
9)使用物理備份模式備份當前資料庫
10)重新升級資料庫,尤其注意ibdata的配置,如果升級失敗則使用物理備份快速回退
11)升級過程再次受阻,這一次是sql_mode,系統資料字典升級成功,但是資料庫的表檢測中,主要因為sql_mode的資料格式校驗,導致很多資料表的格式校驗失敗,需要執行類似 alter table test.xxxxx force這樣的重構操作。
12)因為恢復過程中未知原因,InnoDB的redo log也受到一些影響,日誌開始拋錯,所以當前恢復的資料庫就算升級字典成功,本身也有一些硬傷。
後續的第二波補救措施如下:
13)使用mysqldump備份當前資料庫,僅僅備份指定的資料庫,不使用all-databases選項,許可權單獨匯出。
14)部署MySQL 5.7的例項,不同的埠,如4390埠
15)sql_mode和5.5版本通配,修改其他引數等
16)匯入mysqldump資料至4390的5.7例項
17)建立主從複製關係
18)切換資料庫埠,使5.7的新版本服務生效
整個過程也是一波多折,見招拆招,發現想走捷徑,最後發現一個坑都沒有拉下,而這也給了我深刻的教訓,千萬不能掉以輕心,不能帶著試運氣的態度處理問題。
以上就是MySQL資料庫升級的一些"陷阱"的詳細內容,更多關於MySQL資料庫升級的資料請關注我們其它相關文章!