問題描述    

                 某一臺伺服器上面 程式在每小時內偶爾丟包 排查伺服器所有效能瓶頸之後發現一個奇怪的問題 程式丟包前後 會有IO過高的情況 於是使用iotop命令排查是哪個程式偶爾佔用過高的磁碟IO

所用命令

                 iotop

相關引數 

    -o：只顯示有io操作的程序

    -b：批量顯示，無互動，主要用作記錄到檔案

    -n NUM：顯示NUM次，主要用於非互動式模式

    -d SEC：間隔SEC秒顯示一次

    -p PID：監控的程序pid

    -u USER：監控的程序使用者

排查方法

    iostat命令 只能看出每個碟符的IO情況 不能看到是具體哪個程序使用的IO 所以 我們需要使用iotop命令 但是這次的IO情況並不是一直出現 而是偶爾不規律出現 如果用肉眼去一直盯著終端看 顯然不可行 於是我們可以用iotop的-b引數 讓結果以非互動的方式輸出 這樣我們便可以用awk去處理 打印出我們需要的IO列以及相應的程序

命令

iotop -b | awk -F'%' '{if($(NF-1) > 0.2 && $(NF-1) ~ /[0-9]/ && $0 !~ /DISK/)printf "TIME: %s,IO:%s%,COMMAND:%s\n",strftime("%F %T"),$(NF-1),$NF}'

輸出結果

[[email protected] ~]# iotop -b | awk -F'%' '{if($(NF-1) > 0.2 && $(NF-1) ~ /[0-9]/ && $0 !~ /DISK/)printf "TIME: %s,IO:%s%,COMMAND:%s\n",strftime("%F %T"),$(NF-1),$NF}'
TIME: 2018-03-21 18:04:23,IO:  0.23 %,COMMAND: [kworker/0:2]
TIME: 2018-03-21 18:04:35,IO:  0.44 %,COMMAND: [kworker/0:2]
TIME: 2018-03-21 18:04:47,IO:  0.22 %,COMMAND: [kworker/0:2]
TIME: 2018-03-21 18:04:58,IO:  0.39 %,COMMAND: [kworker/0:2]
TIME: 2018-03-21 18:05:08,IO:  0.68 %,COMMAND: [kworker/0:2]
TIME: 2018-03-21 18:05:22,IO:  0.52 %,COMMAND: [kworker/0:2]
TIME: 2018-03-21 18:05:34,IO:  0.24 %,COMMAND: [kworker/0:2]
TIME: 2018-03-21 18:05:45,IO:  0.26 %,COMMAND: [kworker/0:2]
 

    輸出結果類似上面 這裡只是簡單舉個例子 打印出IO大於0.2%的程序 並根據客戶需求列印除相應的時間 這裡的時間列印 利用awk自己的函式 strftime()