mysql 實戰 or、in與union all 的查詢效率
OR、in和union all 查詢效率到底哪個快。
網上很多的聲音都是說union all 快於 or、in,因為or、in會導致全表掃描,他們給出了很多的例項。
但真的union all真的快於or、in?本文就是採用實際的例項來探討到底是它們之間的效率。
1:建立表,插入資料、資料量為1千萬【要不效果不明顯】。
- drop table if EXISTS BT;
- create table BT(
- ID int(10) NOT NUll,
- VName varchar(20) DEFAULT '' NOT NULL,
-
PRIMARY key( ID )
- )ENGINE=INNODB;
該表只有兩個欄位 ID為主鍵【索引頁類似】,一個是普通的欄位。(偷懶就用簡單的表結構呢)
向BT表中插入1千萬條資料
這裡我寫了一個簡單的儲存過程【所以你的mysql版本至少大於5.0,俺的版本為5.1】,程式碼如下。
注意:最好
INSERT INTO BT ( ID,VNAME ) VALUES( i, CONCAT( 'M', i ) );---1
修改為
INSERT INTO BT ( ID,VNAME ) VALUES( i, CONCAT( 'M', i, 'TT' ) );---2
修改原因在
非索引列及VNAME使用了聯合進行完全掃描請使用1 。
非索引列及VNAME使用了全表掃描請使用2 。
- DROP PROCEDURE IF EXISTS test_proc;
- CREATE PROCEDURE test_proc()
- BEGIN
- declare i int default 0;
- set autocommit = 0;
- while i<10000000 do
- INSERT INTO BT ( ID,VNAME ) VALUES( i, CONCAT( 'M', i ) );
- set i = i+1;
- if i 00 = 0 then
-
commit
- end if;
- end while;
- END;
就不寫註釋呢,挺簡單的。
儲存過程是最好設定下innob的相關引數【主要和日誌、寫快取相關這樣能加快插入】,俺沒有設定插入1千萬條資料插了6分鐘。
部分資料如下:1千萬資料類似
body{margin:0;padding:0}
2:實戰
2.1 :分別在索引列上使用 or、in、union all
我們建立的表只有主鍵索引,所以只能用ID做查詢呢。我們查 ID 為 98,85220,9888589的三個資料各個耗時如下:
body{margin:0;padding:0}
時間都為0.00,怎麼會這樣呢,呵呵所有查詢都是在毫秒級別。
我使用其他的工具--EMS SQL Manager for mysql
查詢顯示時間為
93 ms, 94ms,93 ms,時間相差了多少幾乎可以忽略。
然後我們在看看各自的執行計劃
body{margin:0;padding:0}
這裡要注意的欄位type 與ref欄位
我們發現union all 的所用的 type【type為顯示連線使用了何種型別】 為ref 而or和in為range【ref連線型別優於range,相差不了多少】,而查詢行數都一樣【看rows欄位都是為3】。
從整個的過程來看,在索引列使用常數or及in和union all查詢相差不了多少。
但為什麼在有的複雜查詢中,再索引列使用or及in 比union all 速度慢很多呢,這可能是你的查詢寫的不夠合理,讓mysql放棄索引而進行全表掃描。
2.2:在非索引列中使用 or、in及union all。
我們查 VNAME 為 M98,M85220,M9888589的三個資料各個耗時如下:
body{margin:0;padding:0}
我們發現為啥union all查詢時間幾乎為 or 和in的三倍。
這是為什麼呢,我們先不說,先看看三個的查詢計劃。
body{margin:0;padding:0}
這裡我們發現計劃幾乎一樣。
但我們要注意掃描的此時對於 or及in 來說 只對表掃描一次即rows是列為9664782。
而對於union all 來說對錶掃描了三次即rows的和為9664782*3。
這也是為什麼我們看到union all 為幾乎為三倍的原因。
備註: 如果使用儲存過程使用第二sql該執行計劃所有的type列 為 all,其實這個是我最想演示的,但現在已經快寫完畢了才發現問題將錯就錯呢。
3:總結
3.1:不要迷信union all 就比 or及in 快,要結合實際情況分析到底使用哪種情況。
3.2:對於索引列來最好使用union all,因複雜的查詢【包含運算等】將使or、in放棄索引而全表掃描,除非你能確定or、in會使用索引。
3.3:對於只有非索引欄位來說你就老老實實的用or 或者in,因為 非索引欄位本來要全表掃描而union all 只成倍增加表掃描的次數。
3.4:對於及有索引欄位【索引欄位有效】又包含非索引欄位來時,按理你也使用or 、in或者union all 都可以,
但是我推薦使用or、in。
如以下查詢:
- select * from bt where bt.VName = 'M98' or bt.id ='9888589'
- select * from bt where bt.VName = 'M98'
- UNION ALL
- select * from bt where bt.id = '9888589'
該兩個查詢速度相差多少 主要取決於 索引列查詢時長,如索引列查詢時間太長的話,那你也用or或者in代替吧。
3.5: 以上主要針對的是單表,而多表聯合查詢來說,考慮的地方就比較多了,比如連線方式,查詢表資料量分佈、索引等,再結合單表的策略選擇合適的關鍵字。
個人觀點僅供參考、需要結合實際資料用例測試選擇合適的關鍵字.......................
以上測試mysql5.1