MySQL limit使用方法以及超大分頁(yè)問(wèn)題解決
前言
日常開(kāi)發(fā)中,我們使用mysql來(lái)實(shí)現(xiàn)分頁(yè)功能的時(shí)候,總是會(huì)用到mysql的limit語(yǔ)法.而怎么使用卻很有講究的,今天來(lái)總結(jié)一下.
limit語(yǔ)法
limit語(yǔ)法支持兩個(gè)參數(shù),offset和limit,前者表示偏移量,后者表示取前l(fā)imit條數(shù)據(jù).
例如:
## 返回符合條件的前10條語(yǔ)句 select * from user limit 10 ## 返回符合條件的第11-20條數(shù)據(jù) select * from user limit 10,20
從上面也可以看出來(lái),limit n 等價(jià)于limit 0,n.
性能分析
實(shí)際使用中我們會(huì)發(fā)現(xiàn),在分頁(yè)的后面一些頁(yè),加載會(huì)變慢,也就是說(shuō):
select * from user limit 1000000,10
語(yǔ)句執(zhí)行較慢.那么我們首先來(lái)測(cè)試一下.
首先是在offset較小的情況下拿100條數(shù)據(jù).(數(shù)據(jù)總量為200左右).然后逐漸增大offset.
select * from user limit 0,100 ---------耗時(shí)0.03s select * from user limit 10000,100 ---------耗時(shí)0.05s select * from user limit 100000,100 ---------耗時(shí)0.13s select * from user limit 500000,100 ---------耗時(shí)0.23s select * from user limit 1000000,100 ---------耗時(shí)0.50s select * from user limit 1800000,100 ---------耗時(shí)0.98s
可以看到隨著offset的增大,性能越來(lái)越差.
這是為什么呢?因?yàn)閘imit 10000,10的語(yǔ)法實(shí)際上是mysql查找到前10010條數(shù)據(jù),之后丟棄前面的10000行,這個(gè)步驟其實(shí)是浪費(fèi)掉的.
優(yōu)化
用id優(yōu)化
先找到上次分頁(yè)的最大ID,然后利用id上的索引來(lái)查詢,類似于select * from user where id>1000000 limit 100.
這樣的效率非常快,因?yàn)橹麈I上是有索引的,但是這樣有個(gè)缺點(diǎn),就是ID必須是連續(xù)的,并且查詢不能有where語(yǔ)句,因?yàn)閣here語(yǔ)句會(huì)造成過(guò)濾數(shù)據(jù).
用覆蓋索引優(yōu)化
mysql的查詢完全命中索引的時(shí)候,稱為覆蓋索引,是非??斓?因?yàn)椴樵冎恍枰谒饕线M(jìn)行查找,之后可以直接返回,而不用再回?cái)?shù)據(jù)表拿數(shù)據(jù).因此我們可以先查出索引的ID,然后根據(jù)Id拿數(shù)據(jù).
select * from (select id from job limit 1000000,100) a left join job b on a.id = b.id;
耗時(shí)0.2秒.
總結(jié)
用mysql做大量數(shù)據(jù)的分頁(yè)確實(shí)是有難度,但是也有一些方法可以進(jìn)行優(yōu)化,需要結(jié)合業(yè)務(wù)場(chǎng)景多進(jìn)行測(cè)試.
當(dāng)用戶翻到10000頁(yè)的時(shí)候,不如我們直接返回空好了,這么無(wú)聊的嗎...
好了,以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,謝謝大家對(duì)腳本之家的支持。
相關(guān)文章
詳解MySQL?Shell?運(yùn)行?SQL?的兩種內(nèi)置方法
這篇文章主要介紹了MySQL?Shell?運(yùn)行?SQL?的兩種內(nèi)置方法概述,我們來(lái)介紹 MySQL Shell 的組件:MYSQLX 組件的兩個(gè)檢索函數(shù)在具體使用上的一些區(qū)別,需要的朋友可以參考下2022-11-11mysql啟動(dòng)錯(cuò)誤之mysql啟動(dòng)報(bào)1067錯(cuò)誤解決方法
MYSQL啟動(dòng)報(bào)1067錯(cuò)誤,系統(tǒng)日志中是“服務(wù) mysql 意外停止” Mysql日志中則是:Plugin 'FEDERATED' is disabled,下面給出解決方法2014-02-02Mysql字符串類型如何通過(guò)order by排序的正確方式
這篇文章主要介紹了Mysql字符串類型如何通過(guò)order by排序的正確方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2023-08-08分享一下Mysql常見(jiàn)的幾個(gè)錯(cuò)誤問(wèn)題及解決方法
這篇文章主要為大家分享一下Mysql常見(jiàn)的幾個(gè)錯(cuò)誤問(wèn)題及解決方法,需要的朋友可以參考下2015-08-08mysql實(shí)現(xiàn)查詢最接近的記錄數(shù)據(jù)示例
這篇文章主要介紹了mysql實(shí)現(xiàn)查詢最接近的記錄數(shù)據(jù),涉及mysql查詢相關(guān)的時(shí)間轉(zhuǎn)換、排序等相關(guān)操作技巧,需要的朋友可以參考下2018-07-07