阿牛新入職了一家新公司，第一個(gè)任務(wù)是根據(jù)條件導(dǎo)出訂單表中的數(shù)據(jù)到文件中，阿牛心想：這也太簡單了，于是很快寫好了如下語句，并且告訴測試自己的代碼是免測產(chǎn)品。

語句如下：

select * from orders where name=‘lilei' and create_time>'2020-01-01 00:00:00' limit start,end

沒想到上線一段時(shí)間后，生產(chǎn)開始預(yù)警，顯示這條sql為慢SQL，執(zhí)行時(shí)間50多秒，嚴(yán)重影響到了業(yè)務(wù)。
阿牛趕緊請教大佬猿猿幫忙查找原因，猿猿很快就幫其解決了，并且給阿牛做了以下實(shí)驗(yàn)：

一、測試實(shí)驗(yàn)

mysql分頁直接用limit start, count分頁語句：

select * from product limit start, count

當(dāng)起始頁較小時(shí)，查詢沒有性能問題，我們分別看下從10， 100， 1000， 10000開始分頁的執(zhí)行時(shí)間（每頁取20條），如下：

select * from product limit 10, 20 0.016秒
select * from product limit 100, 20 0.016秒
select * from product limit 1000, 20 0.047秒
select * from product limit 10000, 20 0.094秒

我們已經(jīng)看出隨著起始記錄的增加，時(shí)間也隨著增大， 這說明分頁語句limit跟起始頁碼是有很大關(guān)系的，
那么我們把起始記錄改為40w看下（也就是記錄的一半左右）

select * from product limit 400000, 20 3.229秒

再看我們獲取最后一頁記錄的時(shí)間

select * from product limit 866613, 20 37.44秒

像這種分頁最大的頁碼頁顯然這種時(shí)間是無法忍受的。
從中我們也能總結(jié)出兩件事情：
limit語句的查詢時(shí)間與起始記錄的位置成正比。
mysql的limit語句是很方便，但是對記錄很多的表并不適合直接使用。

二、 對limit分頁問題的性能優(yōu)化方法

2.1 利用表的覆蓋索引來加速分頁查詢

我們都知道，利用了索引查詢的語句中如果只包含了那個(gè)索引列（覆蓋索引），那么這種情況會(huì)查詢很快。
因?yàn)槔盟饕檎矣袃?yōu)化算法，且數(shù)據(jù)就在查詢索引上面，不用再去找相關(guān)的數(shù)據(jù)地址了，這樣節(jié)省了很多時(shí)間。
另外Mysql中也有相關(guān)的索引緩存，在并發(fā)高的時(shí)候利用緩存就效果更好了。
在我們的例子中，我們知道id字段是主鍵，自然就包含了默認(rèn)的主鍵索引?，F(xiàn)在讓我們看看利用覆蓋索引的查詢效果如何：
這次我們之間查詢最后一頁的數(shù)據(jù)（利用覆蓋索引，只包含id列），如下：

select id from product limit 866613, 20

查詢時(shí)間為0.2秒，相對于查詢了所有列的37.44秒，提升了大概100多倍的速度。
那么如果我們也要查詢所有列，有兩種方法，

2.2 利用 id>=的形式：

SELECT * FROM product 
WHERE ID > =(select id from product limit 866613, 1) limit 20

查詢時(shí)間為0.2秒，簡直是一個(gè)質(zhì)的飛躍啊。

2.3 利用join

SELECT * FROM product a 
JOIN (select id from product limit 866613, 20) b ON a.ID = b.id

總結(jié)：

是不是認(rèn)為我沒說理由，原因就是使用select * 的情況下直接用limit 600000，10 掃描的是約60萬條數(shù)據(jù)，并且是需要回表60W次，也就是說大部分性能都耗在隨機(jī)訪問上，到頭來只用到10條數(shù)據(jù)，如果先查出來ID，再關(guān)聯(lián)去查詢記錄，就會(huì)快很多，因?yàn)樗饕檎曳蠗l件的ID很快，然后再回表10次。就可以拿到我們想要的數(shù)據(jù)。

到此這篇關(guān)于為什么MySQL分頁用limit會(huì)越來越慢的文章就介紹到這了,更多相關(guān)MySQL分頁limit慢內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

最新評論