1. 程式人生 > 資料庫 >淺談mysql使用limit分頁優化方案的實現

淺談mysql使用limit分頁優化方案的實現

Mysql limit分頁語句用法

與Oracle和MS SqlServer相比,mysql的分頁方法簡單的讓人想哭。

--語法:

SELECT * FROM table LIMIT [offset,] rows | rows OFFSET offset

--舉例:

select * from table limit 5; --返回前5行

select * from table limit 0,5; --同上,返回前5行

select * from table limit 5,10; --返回6-15行

如何優化limit

當一個查詢語句偏移量offset很大的時候,如select * from table limit 10000,10,最好不要直接使用limit,而是先獲取到offset的id後,再直接使用limit size來獲取資料。效果會好很多。

如:

select * From customers Where customer_id >=(
select customer_id From customers Order By customer_id limit 10000,1
) limit 10;

一、測試實驗

mysql分頁直接用limit start,count分頁語句:

select * from product limit start,count

當起始頁較小時,查詢沒有效能問題,我們分別看下從10, 100, 1000, 10000開始分頁的執行時間(每頁取20條),如下:

select * from product limit 10,20 0.016秒
select * from product limit 100,20 0.016秒
select * from product limit 1000,20 0.047秒
select * from product limit 10000,20 0.094秒

我們已經看出隨著起始記錄的增加,時間也隨著增大, 這說明分頁語句limit跟起始頁碼是有很大關係的,
那麼我們把起始記錄改為40w看下(也就是記錄的一半左右)

select * from product limit 400000,20 3.229秒

再看我們取最後一頁記錄的時間

select * from product limit 866613,20 37.44秒

像這種分頁最大的頁碼頁顯然這種時間是無法忍受的。

從中我們也能總結出兩件事情:

  • limit語句的查詢時間與起始記錄的位置成正比。
  • mysql的limit語句是很方便,但是對記錄很多的表並不適合直接使用。

二、 對limit分頁問題的效能優化方法


2.1 利用表的覆蓋索引來加速分頁查詢

我們都知道,利用了索引查詢的語句中如果只包含了那個索引列(覆蓋索引),那麼這種情況會查詢很快。

因為利用索引查詢有優化演算法,且資料就在查詢索引上面,不用再去找相關的資料地址了,這樣節省了很多時間。

另外Mysql中也有相關的索引快取,在併發高的時候利用快取就效果更好了。

在我們的例子中,我們知道id欄位是主鍵,自然就包含了預設的主鍵索引。現在讓我們看看利用覆蓋索引的查詢效果如何:
這次我們之間查詢最後一頁的資料(利用覆蓋索引,只包含id列),如下:

select id from product limit 866613,20 

查詢時間為0.2秒,相對於查詢了所有列的37.44秒,提升了大概100多倍的速度。

那麼如果我們也要查詢所有列,有兩種方法,

id>=的形式:

SELECT * FROM product 
WHERE ID > =(select id from product limit 866613,1) limit 20

查詢時間為0.2秒,簡直是一個質的飛躍啊。

利用join

SELECT * FROM product a 
JOIN (select id from product limit 866613,20) b ON a.ID = b.id

查詢時間也很短,贊!

其實兩者用的都是一個原理嘛,所以效果也差不多。

以上就是本文的全部內容,希望對大家的學習有所幫助,也希望大家多多支援我們。