MySQL 5.6初始配置調優
阿新 • • 發佈:2019-02-05
原文連結: What to tune in MySQL 5.6 after installation
原文日期: 2013年09月17日
翻譯日期: 2014年06月01日
翻譯人員: 鐵錨
有一個很簡單的計算: 如果每個磁碟每秒讀寫(IOPS)可以達到 200次, 則擁有10個磁碟的 RAID10 磁碟陣列IOPS理論上 =(10/2)* 200 = 1000. 我說它“很簡單”,是因為RAID控制器通常能夠提供額外的合併,並有效提高IOPS能力. 對於SSD磁碟,IOPS可以輕鬆達到好幾千.
將這兩個值設定得太大可能會存在某些風險,你肯定不希望後臺操作妨礙了前臺任務IO操作的效能. 過去的經驗表明,將這兩個值設定的太高,InnoDB持有的內部鎖會導致效能降低(按我瞭解到的資訊,在MySQL5.6中這得到了很大的改進).
假如伺服器要支援主從複製,或按時間點恢復,在這種情況下,我們需要:
NO_ENGINE_SUBSTITUTION,NO_ZERO_DATE,
NO_ZERO_IN_DATE,ONLY_FULL_GROUP_BY.
我通常會設定 max_connect_errors=100000, 這樣我可以避免任何“雙重配置”,保證它不會礙事.
你可能希望,許多開啟的連線都是空閒並休眠的. 但如果他們都處於活躍狀態的話,可能會建立大量新的執行緒(thread-thrash).
如果條件允許,可以為應用程式配置優化資料庫連線池(connection-pools)來解決這個問題,而不是開啟並保持大量連線;
當然那些不使用連線池(non-pooled ), 迅速開啟,執行任務後又儘可能快地關閉連線的應用也是可行的.
假設MySQL伺服器的配置為:
原文日期: 2013年09月17日
翻譯日期: 2014年06月01日
翻譯人員: 鐵錨
隨著 大量預設選項的改進, MySQL 5.6比以前版本需要調優的選項大為減少. 在本文中我將講述需要優化的配置項.
InnoDB設定- innodb_buffer_pool_size—— 預設值為 128M. 這是最主要的優化選項,因為它指定 InnoDB 使用多少記憶體來載入資料和索引(data+indexes). 針對專用MySQL伺服器,建議指定為實體記憶體的 50-80%這個範圍. 例如,擁有64GB實體記憶體的機器,快取池應該設定為50GB左右.
如果將該值設定得更大可能會存在風險,比如沒有足夠的空閒記憶體留給作業系統和依賴檔案系統快取的某些MySQL子系統(subsystem),包括二進位制日誌(binary logs),InnoDB事務日誌(transaction logs)等. - innodb_log_file_size—— 預設值為 48M. 有很高寫入吞吐量的系統需要增加該值以允許後臺檢查點活動在更長的時間週期內平滑寫入,得以改進效能. 將此值設定為4G以下是很安全的. 過去的實踐表明,日誌檔案太大的缺點是增加了崩潰時所需的修復時間,但這在5.5和5.6中已得到重大改進.
- —— 預設值為 fdatasync. 如果使用 硬體RAID磁碟控制器, 可能需要設定為 O_DIRECT. 這在讀取InnoDB緩衝池時可防止“雙緩衝(double buffering)”效應,否則會在檔案系統快取與InnoDB快取間形成2個副本(copy).
如果不使用硬體RAID控制器,或者使用SAN儲存時, O_DIRECT 可能會導致效能下降.MySQL使用者手冊 和 Bug #54306 詳細地說明了這一點. - innodb_flush_neighbors —— 預設值為 1. 在SSD儲存上應設定為0(禁用) ,因為使用順序IO沒有任何效能收益. 在使用RAID的某些硬體上也應該禁用此設定,因為邏輯上連續的塊在物理磁碟上並不能保證也是連續的.
- innodb_io_capacityand —— 這些設定會影響InnoDB每秒在後臺執行多少操作. 在 以前的一篇文章 裡我描述了大多數寫IO(除了寫InnoDB日誌)是後臺操作的. 如果你深度瞭解硬體效能(如每秒可以執行多少次IO操作),則使用這些功能是很可取的,而不是讓它閒著.
有一個很簡單的計算: 如果每個磁碟每秒讀寫(IOPS)可以達到 200次, 則擁有10個磁碟的 RAID10 磁碟陣列IOPS理論上 =(10/2)* 200 = 1000. 我說它“很簡單”,是因為RAID控制器通常能夠提供額外的合併,並有效提高IOPS能力. 對於SSD磁碟,IOPS可以輕鬆達到好幾千.
將這兩個值設定得太大可能會存在某些風險,你肯定不希望後臺操作妨礙了前臺任務IO操作的效能. 過去的經驗表明,將這兩個值設定的太高,InnoDB持有的內部鎖會導致效能降低(按我瞭解到的資訊,在MySQL5.6中這得到了很大的改進).
- - 預設值為 1024. 這是mysql 5.6中引入的一個新選項. Mark Callaghan 提供了 一些配置建議. 簡單來說,如果增大了 innodb_io_capacity 值, 應該同時增加 innodb_lru_scan_depth.
假如伺服器要支援主從複製,或按時間點恢復,在這種情況下,我們需要:
- expire-logs-days —— 預設舊日誌會一直保留. 我推薦設定為 1-10 天. 儲存更長的時間並沒有太多用處,因為從備份中恢復會快得多.
- server-id —— 在一個主從複製體系(replication topology )中的所有伺服器都必須設定唯一的 server-id.
- timezone=GMT 將時區設定為格林尼治時間. 越來越多的系統管理員建議將所有伺服器都設定為 格林尼治時間(GMT). 我個人非常喜歡這點,因為現在幾乎所有的業務都是全球化的. 設定為你本地的時區似乎是有點武斷的.
- sql-mode —— MySQL預設對不規範的資料很寬容,並且會靜默地截斷資料. 在我 之前的一篇文章中, 我提到新應用程式最好設定為: STRICT_TRANS_TABLES,ERROR_FOR_DIVISION_BY_ZERO,
NO_ENGINE_SUBSTITUTION,NO_ZERO_DATE,
NO_ZERO_IN_DATE,ONLY_FULL_GROUP_BY.
- skip-name-resolve —— 禁用反向域名解析. DNS解析在某些系統上可能有點慢/不穩定,所以如果不需要基於主機名的授權,我建議避免這種解析.
- max_connect_errors —— Todd Farmer 寫道 :“[這個功能]提供了沒有實際意義的暴力訪問攻擊保護”. 事實上當設定skip-name-resolve 時, max_connect_errors 甚至不起作用(見上一段所述).
我通常會設定 max_connect_errors=100000, 這樣我可以避免任何“雙重配置”,保證它不會礙事.
- ——預設值是151. 我看到很多使用者將他設定得比較大,大多在 300 ~ 1000之間.
你可能希望,許多開啟的連線都是空閒並休眠的. 但如果他們都處於活躍狀態的話,可能會建立大量新的執行緒(thread-thrash).
如果條件允許,可以為應用程式配置優化資料庫連線池(connection-pools)來解決這個問題,而不是開啟並保持大量連線;
當然那些不使用連線池(non-pooled ), 迅速開啟,執行任務後又儘可能快地關閉連線的應用也是可行的.
從5.5開始的另一種解決方案(在MySQL社群版和企業版之間有一些差異) 是使用 執行緒池外掛.
總結(Conclusion)假設MySQL伺服器的配置為:
- 64GB實體記憶體
- 硬體RAID控制器(假設每秒IO可達 2000 IOPS)
- 需要主從複製(Replication)
- 新的應用(eg. 非遺留系統)
- 有防火牆保護
- 不需要基於域名(hostnames,主機名)的授權
- 全球化應用,並不想固定在某一時區.
則配置可能如下所示:
# InnoDB settings
innodb_buffer_pool_size=50G
innodb_log_file_size=2G
innodb_flush_method=O_DIRECT
innodb_io_capacity=2000
innodb_io_capacity_max=6000
innodb_lru_scan_depth=2000
# Binary log/replication
log-bin
sync_binlog=1
sync_relay_log=1
relay-log-info-repository=TABLE
master-info-repository=TABLE
expire_logs_days=10
binlog_format=ROW
transaction-isolation=READ-COMMITTED
innodb_autoinc_lock_mode = 2
# Other
timezone=GMT
character-set-server=utf8
collation-server=utf8_general_ci
sql-mode="STRICT_TRANS_TABLES,
ERROR_FOR_DIVISION_BY_ZERO,
NO_AUTO_CREATE_USER,
NO_AUTO_VALUE_ON_ZERO,
NO_ENGINE_SUBSTITUTION,
NO_ZERO_DATE,
NO_ZERO_IN_DATE,
ONLY_FULL_GROUP_BY"
skip-name_resolve
max-connect-errors=100000
max-connections=500
# Unique to this machine
server-id=123
希望本文說清了主要的問題. 如果有其他建議,請聯絡原作者.