MySQL儲存寫入速度慢分析
問題背景描述: 在MySQL中執行SQL語句,比如insert,賊慢,明明可能也就只是一行資料的插入,資料量很小,但是耗費的時間卻很多,為什麼?
一、儲存結構分析
MySQL儲存結構圖:
解析:
1、讀操作:記憶體讀-->cache快取讀-->磁碟物理讀
讀取到的資料會按上述順序往回送。
2、寫操作:記憶體資料直接寫入cache快取(非常快)-->寫入disk
由上可知,MySQL之所以讀寫速度快,cache在其中起到了關鍵作用。
1、Cache快取特點:
1、速度快
2、掉電資料丟失
3、容量有限
2、保護資料安全(防止意外掉電的資料丟失)應對措施:
在儲存中,增加BBU(電池備份單元,就是電池),在掉電後,可以把快取中的資料寫到磁碟中,保證資料不會丟失。
如果沒有提供BBU或者BBU壞了,記憶體資料就不會寫入cache快取中,就會直接寫入disk中;相較於寫入快取,寫入磁碟的速度就大打折扣(萬倍之差)。與此同時,因為慢下來的“寫”佔了絕大部分“讀”的頻寬。所以BBU問題是讀寫效能差的一很大的影響因素。
3、cache快取容量有限
(4G、8G、16G、32G),系統為了保持cache有用,會週期性的將cache快取的資料寫入磁碟中,避免cache被佔滿。
二、儲存寫入速度慢分析
資料庫-->寫入速度慢-->系統hang住
Q:如何判斷寫入速度慢?
A:
1、懷疑BBU問題
監控BBU的bug,解決:重啟BBU
2、cache被佔滿(類同於BBU壞了的情況)
1、海量的寫入資料佔滿cache快取,判斷:
shell> iostat -x
mysql> show global status like 'handler_write';
2、cache寫入disk的速度慢了(排水速度遠小於注水速度)
硬碟I/O異常,負載過高:資料庫海量的物理讀(異常SQL),判斷:
mysql> show status like 'Innodb_buffer_pool_reads';
3、儲存效能差問題
1、儲存裝置差,更新裝置
2、災備同步風險,“再好的工程師,敵不過藍翔的挖掘機、農民工的鋤頭……”
三、關於BBU
英文簡稱:BBU
英文全稱:Battery Backup Unit
中文全稱:電池備份單元,是電池
1、作用:
在掉電後,把快取中的資料寫到硬碟中,保證資料不會丟失;
是為了意外掉電刷髒資料的一種保護措施;
能夠在系統外部供電失效的情況下,提供後備電源支援,以保證儲存陣列中業務資料的安全性。
2、許多儲存裝置都會配備BBU
BBU在電源供應出現問題的時候,為RAID控制器快取提供電源。當電源斷電時,BBU電力可以使控制器內快取中的資料可以儲存一定時間(根據BBU的型號而決定)。使用者只需要在BBU電力耗盡(電池有限)之前恢復正常供電,快取中的資料即可被完整的寫回RAID中,避免斷電導致資料丟失。
和伺服器電池有點不一樣,伺服器中,在配置RAID卡的時候可以配一個電池,在系統掉電後,能維持記憶體中的資料不丟失,但時間有限,大約12個小時左右,假如是12小時,如果在12內沒有恢復,記憶體中的資料就會丟失;
3、超級電容
伺服器還有一種保護方式,叫超級電容,也是和RAID卡配套的,他能在伺服器掉電後把快取中的資料寫入到電容中,而且會永久儲存,類似寫入硬碟,實際上是寫入電容,你就理解成寫入U盤把。他比電池好,即使伺服器在12個小時後沒有恢復電源,也不會造成資料丟失。
@author:http://www.cnblogs.com/geaozhang/問題背景描述: 在MySQL中執行SQL語句,比如insert,賊慢,明明可能也就只是一行資料的插入,資料量很小,但是耗費的時間卻很多,為什麼?
一、儲存結構分析
MySQL儲存結構圖:
解析:
1、讀操作:記憶體讀-->cache快取讀-->磁碟物理讀
讀取到的資料會按上述順序往回送。
2、寫操作:記憶體資料直接寫入cache快取(非常快)-->寫入disk
由上可知,MySQL之所以讀寫速度快,cache在其中起到了關鍵作用。
1、Cache快取特點:
1、速度快
2、掉電資料丟失
3、容量有限
2、保護資料安全(防止意外掉電的資料丟失)應對措施:
在儲存中,增加BBU(電池備份單元,就是電池),在掉電後,可以把快取中的資料寫到磁碟中,保證資料不會丟失。
如果沒有提供BBU或者BBU壞了,記憶體資料就不會寫入cache快取中,就會直接寫入disk中;相較於寫入快取,寫入磁碟的速度就大打折扣(萬倍之差)。與此同時,因為慢下來的“寫”佔了絕大部分“讀”的頻寬。所以BBU問題是讀寫效能差的一很大的影響因素。
3、cache快取容量有限
(4G、8G、16G、32G),系統為了保持cache有用,會週期性的將cache快取的資料寫入磁碟中,避免cache被佔滿。
二、儲存寫入速度慢分析
資料庫-->寫入速度慢-->系統hang住
Q:如何判斷寫入速度慢?
A:
1、懷疑BBU問題
監控BBU的bug,解決:重啟BBU
2、cache被佔滿(類同於BBU壞了的情況)
1、海量的寫入資料佔滿cache快取,判斷:
shell> iostat -x
mysql> show global status like 'handler_write';
2、cache寫入disk的速度慢了(排水速度遠小於注水速度)
硬碟I/O異常,負載過高:資料庫海量的物理讀(異常SQL),判斷:
mysql> show status like 'Innodb_buffer_pool_reads';
3、儲存效能差問題
1、儲存裝置差,更新裝置
2、災備同步風險,“再好的工程師,敵不過藍翔的挖掘機、農民工的鋤頭……”
三、關於BBU
英文簡稱:BBU
英文全稱:Battery Backup Unit
中文全稱:電池備份單元,是電池
1、作用:
在掉電後,把快取中的資料寫到硬碟中,保證資料不會丟失;
是為了意外掉電刷髒資料的一種保護措施;
能夠在系統外部供電失效的情況下,提供後備電源支援,以保證儲存陣列中業務資料的安全性。
2、許多儲存裝置都會配備BBU
BBU在電源供應出現問題的時候,為RAID控制器快取提供電源。當電源斷電時,BBU電力可以使控制器內快取中的資料可以儲存一定時間(根據BBU的型號而決定)。使用者只需要在BBU電力耗盡(電池有限)之前恢復正常供電,快取中的資料即可被完整的寫回RAID中,避免斷電導致資料丟失。
和伺服器電池有點不一樣,伺服器中,在配置RAID卡的時候可以配一個電池,在系統掉電後,能維持記憶體中的資料不丟失,但時間有限,大約12個小時左右,假如是12小時,如果在12內沒有恢復,記憶體中的資料就會丟失;
3、超級電容
伺服器還有一種保護方式,叫超級電容,也是和RAID卡配套的,他能在伺服器掉電後把快取中的資料寫入到電容中,而且會永久儲存,類似寫入硬碟,實際上是寫入電容,你就理解成寫入U盤把。他比電池好,即使伺服器在12個小時後沒有恢復電源,也不會造成資料丟失。