1. 程式人生 > >MySQL實時監控工具:doDBA

MySQL實時監控工具:doDBA

作業系統及MySQL資料庫的實時效能狀態資料尤為重要,特別是在有效能抖動的時候,這些實時的效能資料可以快速幫助你定位系統或MySQL資料庫的效能瓶頸,就像你在Linux系統上使用「top,sar,iostat」等命令工具一樣,可以立刻定位OS的效能瓶頸是在IO還是CPU上,所以收集/展示這些效能資料就更為重要,那都有哪些重要的實時效能狀態指標可以反應出系統和MySQL資料庫的效能負載呢?


目前在Linux跑MySQL是大多數網際網路公司的標配,以上圖片的效能資料指標項是我認為在Linux,MySQL,InnoDB中較為重要的實時狀態資料,然而在以上圖片Doing一欄其實更為重要,之所以把它叫做Doing

,是因為「processlist,engine innodb status,locks」等指標項才真正反映了MySQL此時正在做什麼。


我們來對標Oracle資料庫看一下,在Oracle資料庫中提供了「AWR,ASH,SQL Monitor」等眾多診斷工具,可以一眼望穿資料庫正在做什麼,甚至都可以知道在過去30天內任何一個時間區間的效能負載和當時資料庫正在做什麼。

在MySQL中雖然有像「zabbix,PMM」等優秀的監控工具,但它們只能反映資料庫歷史的一些效能資料曲線,例如,TPS高了,臨時表使用多了,有InnoDB Deadlocks,但對於MySQL當時的Doing,我只能說不夠直接。如果你在現場,你可以抓到MySQL正在做什麼,但是,你總有不在現場的時候

,如果問你昨天晚上資料庫的效能抖動是什麼原因?怎樣快速重現現場找到引起抖動的原因呢?

答案是可以使用「doDBA tools」,這是一款免費的基於控制檯的監控工具。

doDBA tools是什麼

doDBA tools是一個基於控制檯的遠端監控工具,它不需要在本地/遠端系統上安裝任何軟體,它可以實時收集作業系統、MySQL、InnoDB的實時效能狀態資料,並可以生成Doing日誌檔案,來幫助你快速瞭解/優化系統及MySQL資料庫。

特點

  • golang語言開發

  • 可收集Linux、MySQL相關效能資料

  • 可本地或遠端收集,可多臺

  • 提供類似Linux top的mytop的功能

  • 基於併發生成Doing日誌

    ,還原現場

  • 可記錄到日誌檔案

doDBA tools 工作原理

遠端收集系統資訊是通過ssh(需提供使用者名稱和密碼)的方式連線到遠端伺服器上收集,收集的方法都是通過讀取Linux的proc下的等meminfo,diskstats,uptime,net,vmstat ,cpuinfo ,loadavg等檔案,這和pmm,zabbix收集方式一致。

遠端收集MySQL資訊是通過 MySQL tcp連線到MySQL資料庫上收集,只需要授予連線使用者PROCESS、SELECT許可權即可。

系統資訊和MySQL資訊的收集可以分離,如果只想收集系統資訊,只需要提供系統使用者名稱密碼即可,如果只收集MySQL可以只提供MySQL連線資訊,如果是rds使用者,可以使用-rds引數,在使用mytop時會自動忽略系統資訊的收集。

如何使用doDBA

Github主頁:
https://github.com/dblucyne/dodba_tools
Download:
wget https://raw.githubusercontent.com/dblucyne/dodba_tools/master/doDBA --no-check-certificate
wget https://raw.githubusercontent.com/dblucyne/dodba_tools/master/doDBA.conf --no-check-certificate
chmod +x doDBA
下載下來就可以直接使用,不依賴於任何環境。
使用幫助:
./doDBA -help
  -c string
        configuration file. (default "doDBA.conf")
  -h string
        Connect to host/IP.
  -sys
        Print system info.
  -myall
        Print system and mysql info.
  -mysql
        Print mysql info.
  -innodb
        Print innodb info.
  -mytop
        Print mysql prcesslist info , like top.
  -i duration
        refresh interval in seconds. (default 1s)
  -t int
        doing on Threads_running. (default 50)
  -rds
        Ignore system info.
  -log
        Print to file by day.
  -nocolor
        Print to nocolor.

使用例項

1. 收集Linux效能資料
./doDBA -h=10.1.x.xx -sys
2. 收集MySQL效能資料
./doDBA -h=10.1.x.xx -mysql
3. 收集InnoDB效能資料
./doDBA -h=10.1.x.xx -innodb
4. 收集MySQL及Linux效能資料
./doDBA -h=10.1.x.xx -myall
5. mytop --like linux top
./doDBA -h=10.1.x.xx -mytop
6. 藉助Shell收集多臺
cat ip.txt
10.1.x.x1
10.1.x.x2
Shell
cat ip.txt | while read ip; 
 do 
 echo $ip;
 ./doDBA -h=$ip -mysql -log </dev/null & 
 done
7. 收集到日誌檔案
./doDBA -h=10.1.x.xx -mysql -log
8. 開啟Doing功能

使用【-t】引數可以基於Threads_running的數量設定閾值,設定後可記錄「processlist,engine innodb status」資訊到dodba.log日誌中,--重現現場。

./doDBA -h=10.1.x.xx -myall -t=3
9. 檢視Doing日誌
tail -f dodba.log
轉自:http://mp.weixin.qq.com/s?__biz=MjM5NzAzMTY4NQ==&mid=2653929717&idx=1&sn=0774d10e4e2271334dd7fd1c4c792813&chksm=bd3b5a9f8a4cd389ff9e82d1be2b5984afb903fbd2e1c55306e04b97a12d573a354ed75fba30#rd