1. 程式人生 > 實用技巧 >MySQL慢查詢&分析SQL執行效率淺談

MySQL慢查詢&分析SQL執行效率淺談

如何在MySQL中查詢效率慢的SQL語句呢?這可能是困擾很多人的一個問題,MySQL通過慢查詢日誌定位那些執行效率較低的SQL 語句,用--log-slow-queries[=file_name]選項啟動時,mysqld 會寫一個包含所有執行時間超過long_query_time 秒的SQL語句的日誌檔案,通過檢視這個日誌檔案定位效率較低的SQL 。

MySQL慢查詢定義

分析MySQL語句查詢效能的方法除了使用 EXPLAIN 輸出執行計劃,還可以讓MySQL記錄下查詢超過指定時間的語句,我們將超過指定時間的SQL語句查詢稱為“慢查詢”。

慢查詢的體現

慢查詢主要體現在慢上,通常意義上來講,只要返回時間大於 >1 sec上的查詢都可以稱為慢查詢。慢查詢會導致CPU,記憶體消耗過高。資料庫伺服器壓力陡然過大,那麼大部分情況來講,肯定是由某些慢查詢導致的。

開啟慢查詢的方法:

MySQL5.0以上的版本可以支援將執行比較慢的SQL語句記錄下來。
mysql> show variables like 'long%';

long_query_time 
| 10.000000 mysql> set long_query_time=1; mysql> show variables like 'slow%'; slow_launch_time | 2 slow_query_log | ON slow_query_log_file | /tmp/slow.log mysql> set global slow_query_log='ON'

欄位解釋

long_query_time 當SQL語句執行時間超過此數值時,就會被記錄到日誌中,建議設定為1或者更短。

slow_query_log 這個引數設定為ON,可以捕獲執行時間超過一定數值的SQL語句。

slow_query_log_file 記錄日誌的檔名。

一旦slow_query_log變數被設定為ON,MySQL會立即開始記錄。

/etc/my.cnf 裡面可以設定上面MySQL全域性變數的初始值。

分析SQL執行效率淺談

一、MySQL資料庫有幾個配置選項可以幫助我們及時捕獲低效SQL語句

slow_query_log

這個引數設定為ON,可以捕獲執行時間超過一定數值的SQL語句。

long_query_time

當SQL語句執行時間超過此數值時,就會被記錄到日誌中,建議設定為1或者更短。

slow_query_log_file

記錄日誌的檔名。

log_queries_not_using_indexes

這個引數設定為ON,可以捕獲到所有未使用索引的SQL語句,儘管這個SQL語句有可能執行得挺快。

二、檢測MySQL中sql語句的效率的方法

1. 通過查詢日誌

1)Windows下開啟MySQL慢查詢

MySQL在Windows系統中的配置檔案一般是是my.ini找到[mysqld]下面加上

程式碼如下

log slow queries = F:/MySQL/log/mysqlslowquery.log

long_query_time = 2

2)Linux下啟用MySQL慢查詢

MySQL在Linux系統中的配置檔案一般是是my.cnf找到[mysqld]下面加上

程式碼如下

log slow queries = /data/mysqldata/slowquery.log

long_query_time = 2

說明:

log slow queries = /data/mysqldata/slowquery.log

為慢查詢日誌存放的位置,一般這個目錄要有MySQL的執行帳號的可寫許可權,一般都將這個目錄設定為MySQL的資料存放目錄;

long_query_time = 2中的2表示查詢超過兩秒才記錄;

2. show processlist 命令

SHOW PROCESSLIST顯示哪些執行緒正在執行。您也可以使用mysqladmin processlist語句得到此資訊。

例如如圖:

各列的含義和用途:

Id列:一個標識,你要kill一個語句的時候很有用,用命令殺掉此查詢 /*/mysqladmin kill 程序號。

User列:顯示單前使用者,如果不是root,這個命令就只顯示你許可權範圍內的sql語句。

Host列:顯示這個語句是從哪個ip的哪個埠上發出的。用於追蹤出問題語句的使用者。

db列:顯示這個程序目前連線的是哪個資料庫。

Command列:顯示當前連線的執行的命令,一般就是休眠(sleep),查詢(query),連線(connect)。

Time列:此這個狀態持續的時間,單位是秒。

State列:顯示使用當前連線的sql語句的狀態,很重要的列,後續會有所有的狀態的描述,請注意,state只是語句執行中的某一個狀態,一個 sql語句,以查詢為例,可能需要經過copying to tmp table,Sorting result,Sending data等狀態才可以完成

Info列;顯示這個sql語句,因為長度有限,所以長的sql語句就顯示不全,但是一個判斷問題語句的重要依據。

這個命令中最關鍵的就是state列,MySQL列出的狀態主要有以下幾種:

Checking table:正在檢查資料表(這是自動的)。

Closing tables:正在將表中修改的資料重新整理到磁碟中,同時正在關閉已經用完的表。這是一個很快的操作,如果不是這樣的話,就應該確認磁碟空間是否已經滿了或者磁碟是否正處於重負中。

Connect Out:複製從伺服器正在連線主伺服器。

Copying to tmp table on disk:由於臨時結果集大於tmp_table_size,正在將臨時表從記憶體儲存轉為磁碟儲存以此節省記憶體。

Creating tmp table:正在建立臨時表以存放部分查詢結果。

deleting from main table:伺服器正在執行多表刪除中的第一部分,剛刪除第一個表。

deleting from reference tables:伺服器正在執行多表刪除中的第二部分,正在刪除其他表的記錄。

Flushing tables:正在執行FLUSH TABLES,等待其他執行緒關閉資料表。

Killed:傳送了一個kill請求給某執行緒,那麼這個執行緒將會檢查kill標誌位,同時會放棄下一個kill請求。MySQL會在每次的主迴圈中檢查kill標誌位,不過有些情況下該執行緒可能會過一小段才能死掉。如果該執行緒程被其他執行緒鎖住了,那麼kill請求會在鎖釋放時馬上生效。

Locked:被其他查詢鎖住了。

Sending data:正在處理SELECT查詢的記錄,同時正在把結果傳送給客戶端。

Sorting for group:正在為GROUP BY做排序。

Sorting for order:正在為ORDER BY做排序。

Opening tables:這個過程應該會很快,除非受到其他因素的干擾。例如,在執ALTER TABLE或LOCK TABLE語句行完以前,資料表無法被其他執行緒開啟。正嘗試開啟一個表。

Removing duplicates:正在執行一個SELECT DISTINCT方式的查詢,但是MySQL無法在前一個階段優化掉那些重複的記錄。因此,MySQL需要再次去掉重複的記錄,然後再把結果傳送給客戶端。

Reopen table:獲得了對一個表的鎖,但是必須在表結構修改之後才能獲得這個鎖。已經釋放鎖,關閉資料表,正嘗試重新開啟資料表。

Repair by sorting:修復指令正在排序以建立索引。

Repair with keycache:修復指令正在利用索引快取一個一個地建立新索引。它會比Repair by sorting慢些。

Searching rows for update:正在講符合條件的記錄找出來以備更新。它必須在UPDATE要修改相關的記錄之前就完成了。

Sleeping:正在等待客戶端傳送新請求.

System lock:正在等待取得一個外部的系統鎖。如果當前沒有執行多個mysqld伺服器同時請求同一個表,那麼可以通過增加--skip-external-locking引數來禁止外部系統鎖。

Upgrading lock:INSERT DELAYED正在嘗試取得一個鎖表以插入新記錄。

Updating:正在搜尋匹配的記錄,並且修改它們。

User Lock:正在等待GET_LOCK()。

Waiting for tables:該執行緒得到通知,資料表結構已經被修改了,需要重新開啟資料表以取得新的結構。然後,為了能的重新開啟資料表,必須等到所有其他執行緒關閉這個表。以下幾種情況下會產生這個通知:FLUSH TABLES tbl_name, ALTER TABLE, RENAME TABLE, REPAIR TABLE, ANALYZE TABLE,或OPTIMIZE TABLE。

waiting for handler insert:INSERT DELAYED已經處理完了所有待處理的插入操作,正在等待新的請求。

大部分狀態對應很快的操作,只要有一個執行緒保持同一個狀態好幾秒鐘,那麼可能是有問題發生了,需要檢查一下。

還有其他的狀態沒在上面中列出來,不過它們大部分只是在檢視伺服器是否有存在錯誤是才用得著。

三、explain來了解SQL執行的狀態

explain顯示了mysql如何使用索引來處理select語句以及連線表。可以幫助選擇更好的索引和寫出更優化的查詢語句。

使用方法,在select語句前加上explain就可以了,例如下:

explain select c.title, cc.content form comment_content cc, comment c where cc.id=c.id

結果如圖:

EXPLAIN列的解釋

table列:顯示這一行的資料是關於哪張表的

type列:這是重要的列,顯示連線使用了何種型別。從最好到最差的連線型別為const、eq_reg、ref、range、index和ALL

possible_keys 列:顯示可能應用在這張表中的索引。如果為空,沒有可能的索引。可以為相關的域從WHERE語句中選擇一個合適的語句

key列:實際使用的索引。如果為NULL,則沒有使用索引。很少的情況下,MYSQL會選擇優化不足的索引。這種情況下,可以在SELECT語句 中使用USE INDEX(indexname)來強制使用一個索引或者用IGNORE INDEX(indexname)來強制MYSQL忽略索引

key_len列:使用的索引的長度。在不損失精確性的情況下,長度越短越好

ref列:顯示索引的哪一列被使用了,如果可能的話,是一個常數

rows列:MYSQL認為必須檢查的用來返回請求資料的行數

Extra列:關於MYSQL如何解析查詢的額外資訊。

最後MySQL優化建議

索引優化,最簡單粗暴的辦法,給查詢語句新增複合索引,但不是最好的方式

將大表拆成小的彙總表

重在實踐,MySQL優化器在很多情況下不能給出,最快的實現方式

避免在大表上的group by,order by,offset 操作,除非你知道如何優化的前提下

SQL WHERE查詢條件,儘量按照新增的索引順序來寫