mysql分頁(yè)原理和高效率的mysql分頁(yè)查詢(xún)語(yǔ)句
以前我在mysql中分頁(yè)都是用的 limit 100000,20這樣的方式,我相信你也是吧,但是要提高效率,讓分頁(yè)的代碼效率更高一些,更快一些,那我們又該怎么做呢?
第一部分:看一下分頁(yè)的基本原理:
mysql explain SELECT * FROM message ORDER BY id DESC LIMIT 10000, 20
***************** 1. row **************
id: 1
select_type: SIMPLE
table: message
type: index
possible_keys: NULL
key: PRIMARY
key_len: 4
ref: NULL
rows: 10020
Extra:
1 row in set (0.00 sec)
對(duì)上面的mysql語(yǔ)句說(shuō)明:limit 10000,20的意思掃描滿(mǎn)足條件的10020行,扔掉前面的10000行,返回最后的20行,問(wèn)題就在這里,如果是limit 100000,100,需要掃描100100行,在一個(gè)高并發(fā)的應(yīng)用里,每次查詢(xún)需要掃描超過(guò)10W行,性能肯定大打折扣。文中還提到limit n性能是沒(méi)問(wèn)題的,因?yàn)橹粧呙鑞行。
第二部分:根據(jù)雅虎的幾位工程師帶來(lái)了一篇Efficient Pagination Using MySQL的報(bào)告內(nèi)容擴(kuò)展:在文中提到一種clue的做法,給翻頁(yè)提供一些線(xiàn)索,比如還是SELECT * FROM message ORDER BY id DESC,按id降序分頁(yè),每頁(yè)20條,當(dāng)前是第10頁(yè),當(dāng)前頁(yè)條目id最大的是1020,最小的是1000,如果我們只提供上一頁(yè)、下一頁(yè)這樣的跳轉(zhuǎn)(不提供到第N頁(yè)的跳轉(zhuǎn)),那么在處理上一頁(yè)的時(shí)候SQL語(yǔ)句可以是:
SELECT * FROM message WHERE id>1020 ORDER BY id ASC LIMIT 20;//下一頁(yè)
處理下一頁(yè)的時(shí)候SQL語(yǔ)句可以是:
SELECT * FROM message WHERE id<1000 ORDER BY id DESC LIMIT 20;//上一頁(yè)
不管翻多少頁(yè),每次查詢(xún)只掃描20行。
缺點(diǎn)是只能提供上一頁(yè)、下一頁(yè)的鏈接形式,但是我們的產(chǎn)品經(jīng)理非常喜歡“上一頁(yè) 1 2 3 4 5 6 7 8 9 下一頁(yè)”這樣的鏈接方式,怎么辦呢?
如果LIMIT m,n不可避免的話(huà),要優(yōu)化效率,只有盡可能的讓m小一下,我們擴(kuò)展前面的clue做法,還是SELECT * FROM message ORDER BY id DESC,按id降序分頁(yè),每頁(yè)20條,當(dāng)前是第10頁(yè),當(dāng)前頁(yè)條目id最大的是2519,最小的是2500;
當(dāng)是第10頁(yè)的SQL如下:
SELECT * FROM tb_goods_info WHERE auto_id >=2500 ORDER BY auto_id ASC LIMIT 0,20
比如要跳到第9頁(yè),SQL語(yǔ)句可以這樣寫(xiě):
SELECT * FROM tb_goods_info WHERE auto_id <2500 ORDER BY auto_id desc LIMIT 0,20
比如要跳到第8頁(yè),SQL語(yǔ)句可以這樣寫(xiě):
SELECT * FROM tb_goods_info WHERE auto_id <2500 ORDER BY auto_id desc LIMIT 20,20
比如要跳到第7頁(yè),SQL語(yǔ)句可以這樣寫(xiě):
SELECT * FROM tb_goods_info WHERE auto_id <2500 ORDER BY auto_id desc LIMIT 40,20
跳轉(zhuǎn)到第11頁(yè):
SELECT * FROM tb_goods_info WHERE auto_id >2519 ORDER BY auto_id asc LIMIT 0,20
跳轉(zhuǎn)到第12頁(yè):
SELECT * FROM tb_goods_info WHERE auto_id >2519 ORDER BY auto_id asc LIMIT 20,20
跳轉(zhuǎn)到第13頁(yè):
SELECT * FROM tb_goods_info WHERE auto_id >2519 ORDER BY auto_id asc LIMIT 40,20
原理還是一樣,記錄住當(dāng)前頁(yè)id的最大值和最小值,計(jì)算跳轉(zhuǎn)頁(yè)面和當(dāng)前頁(yè)相對(duì)偏移,由于頁(yè)面相近,這個(gè)偏移量不會(huì)很大,這樣的話(huà)m值相對(duì)較小,大大減少掃描的行數(shù)。其實(shí)傳統(tǒng)的limit m,n,相對(duì)的偏移一直是第一頁(yè),這樣的話(huà)越翻到后面,效率越差,而上面給出的方法就沒(méi)有這樣的問(wèn)題。
注意SQL語(yǔ)句里面的ASC和DESC,如果是ASC取出來(lái)的結(jié)果,顯示的時(shí)候記得倒置一下。
已在60W數(shù)據(jù)總量的表中測(cè)試,效果非常明顯
- MySql分頁(yè)時(shí)使用limit+order by會(huì)出現(xiàn)數(shù)據(jù)重復(fù)問(wèn)題解決
- 為什么MySQL分頁(yè)用limit會(huì)越來(lái)越慢
- mysql分頁(yè)的limit參數(shù)簡(jiǎn)單示例
- 淺談MySQL分頁(yè)Limit的性能問(wèn)題
- MySQL分頁(yè)Limit的優(yōu)化過(guò)程實(shí)戰(zhàn)
- mysql分頁(yè)性能探索
- 淺析Oracle和Mysql分頁(yè)的區(qū)別
- SpringMVC+Mybatis實(shí)現(xiàn)的Mysql分頁(yè)數(shù)據(jù)查詢(xún)的示例
- 利用Spring MVC+Mybatis實(shí)現(xiàn)Mysql分頁(yè)數(shù)據(jù)查詢(xún)的過(guò)程詳解
- mysql分頁(yè)時(shí)offset過(guò)大的Sql優(yōu)化經(jīng)驗(yàn)分享
- MySQL分頁(yè)分析原理及提高效率
- MySQL優(yōu)化案例系列-mysql分頁(yè)優(yōu)化
- 你應(yīng)該知道的PHP+MySQL分頁(yè)那點(diǎn)事
- MYSQL分頁(yè)limit速度太慢的優(yōu)化方法
- MySQL分頁(yè)優(yōu)化
- MySQL分頁(yè)技術(shù)、6種分頁(yè)方法總結(jié)
- 8種MySQL分頁(yè)方法總結(jié)
- MySQL的幾種分頁(yè)方式,你知道幾種方式
相關(guān)文章
Windows系統(tǒng)下MySQL無(wú)法啟動(dòng)的萬(wàn)能解決方法
這篇文章主要給大家介紹了關(guān)于Windows系統(tǒng)下MySQL無(wú)法啟動(dòng)的萬(wàn)能解決方法,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2020-12-12Mysql Workbench查詢(xún)mysql數(shù)據(jù)庫(kù)方法
在本篇文章里小編給大家分享了個(gè)關(guān)于Mysql Workbench查詢(xún)mysql數(shù)據(jù)庫(kù)方法和步驟,有需要的朋友們學(xué)習(xí)下。2019-03-03Navicat for MySQL定時(shí)備份數(shù)據(jù)庫(kù)及數(shù)據(jù)恢復(fù)詳解
這篇文章主要介紹了Navicat for MySQL定時(shí)備份數(shù)據(jù)庫(kù)及數(shù)據(jù)恢復(fù)的相關(guān)資料,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2017-10-10centos6.5中rpm包安裝mysql5.7初始化出錯(cuò)的解決方法
這篇文章主要介紹了centos6.5中rpm包安裝mysql5.7初始化出錯(cuò)的解決方法,需要的朋友可以參考下2017-09-09MySQL數(shù)據(jù)庫(kù)外鍵?foreing?key
這篇文章主要介紹了MySQL數(shù)據(jù)庫(kù)外鍵?foreing?key,外鍵表示了兩個(gè)實(shí)體之間的聯(lián)系,更多相關(guān)介紹需要的小伙伴可以參考一下2022-06-06