Advanced Pagination for MySQL(mysql高級(jí)分頁(yè))
在葉子的文章里談到了使用inner join 從而減少了對(duì)page的掃描也就是減少了所謂的回表 例如:
SELECT * FROM `t1` INNER JOIN ( SELECT id FROM `t1`ORDER BY id DESC LIMIT 935500,10) t2 USING (id)
通過直接對(duì)id的操作 而不是整張表的掃描 通過id 的join 抓出符合條件id 然后通過ID 再去做數(shù)據(jù)的抓取。這樣就避免了對(duì)不需要的頁(yè)面的掃描。
不過這樣也不是最佳的方法 還可以通過對(duì)id 的 range更加縮小范圍 例如:
我們要分100條記錄分一頁(yè) 可以寫成
$page_size=100 select * from t where id > 99 order by id asc limit $page_size ; select * from t where id >199 order by id asc limit $page_size;
盡量避免limit M,N 這種寫法 mysql在對(duì)M值很大 而offset很小的時(shí)候的處理方式很不人性化 ,所以盡量不要使用offset來(lái)取得特定行數(shù)。
在這里有一個(gè)問題 比如根據(jù)不是唯一索引的column分頁(yè) 那么可能存在一個(gè)問題,例如一個(gè)列column1存在11個(gè)key=100的值 那么你使用limit N 之后取到的min value還是同一個(gè)值
這種情況如何處理? 給個(gè)例子:
比如要每10條記錄分一頁(yè)
select * from t order by column1 desc limit 10
注意這里取到的min value還是100 (11個(gè)連續(xù)的100) 對(duì)下面的分頁(yè)會(huì)產(chǎn)生影響,如何處理?
雅虎給出的方案非常好 取一個(gè)extra的column 例如PK 或者unique index key 例如:
select * from t order by column1 desc, id desc limit 10 -- 第一個(gè)頁(yè)
select * from t where column1 <=minvalue_col1 and (id < minvalue_id or column1 < minvalue_col1) limit 10 ---第二個(gè)頁(yè)
這樣就確保了唯一性 保證了每頁(yè)的數(shù)據(jù)不會(huì)重復(fù) 思想就是通過add一個(gè)唯一的extra 取得這個(gè)extra的邊界值 結(jié)合range column來(lái)進(jìn)行分頁(yè)。
這個(gè)SQL 還能被優(yōu)化成:
SELECT m2.* FROM t m1, t m2 WHERE m1.id = m2.id AND m1.column1 <= minvalue_col1
AND (m1.id < minvalue_id OR m1.column1 < minvalue_col1) ORDER BY m1.column1 DESC, m1.id DESC LIMIT 10;
核心思想: 通過extra過濾 配合ID掃描 避免大量的回表操作 這樣就達(dá)到了要取多少條 就掃描多少條 (in page)
相關(guān)文章
mysql滑動(dòng)聚合/年初至今聚合原理與用法實(shí)例分析
這篇文章主要介紹了mysql滑動(dòng)聚合原理與用法,結(jié)合實(shí)例形式分析了mysql滑動(dòng)聚合的相關(guān)功能、原理、使用方法及操作注意事項(xiàng),需要的朋友可以參考下2019-12-12淺析MySQL內(nèi)存的使用說明(全局緩存+線程緩存)
本篇文章是對(duì)MySQL內(nèi)存的使用說明(全局緩存+線程緩存)進(jìn)行了詳細(xì)的分析介紹,需要的朋友參考下2013-06-06mysql的limit用法及邏輯分頁(yè)和物理分頁(yè)
本文主要介紹了mysql的limit用法及邏輯分頁(yè)和物理分頁(yè),文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2023-03-03MySQL數(shù)據(jù)庫(kù)的多種連接方式以及實(shí)用工具
mysql連接操作是客戶端進(jìn)程與mysql數(shù)據(jù)庫(kù)實(shí)例進(jìn)程進(jìn)行通信,下面這篇文章主要給大家介紹了關(guān)于MySQL數(shù)據(jù)庫(kù)的多種連接方式以及實(shí)用工具的相關(guān)資料,文中通過圖文介紹的非常詳細(xì),需要的朋友可以參考下2023-02-02Django+mysql配置與簡(jiǎn)單操作數(shù)據(jù)庫(kù)實(shí)例代碼
這篇文章主要介紹了Django+mysql配置與簡(jiǎn)單操作數(shù)據(jù)庫(kù)實(shí)例,需要的朋友可以參考下2017-07-07mysql group_concat 實(shí)現(xiàn)把分組字段寫成一行的方法示例
這篇文章主要介紹了mysql group_concat實(shí)現(xiàn)把分組字段寫成一行的方法,結(jié)合實(shí)例形式分析了group_concat函數(shù)的功能、查詢用法及相關(guān)操作技巧,需要的朋友可以參考下2019-10-10MySQL優(yōu)化之對(duì)RAND()的優(yōu)化方法
這篇文章主要介紹了MySQL優(yōu)化之對(duì)RAND()的優(yōu)化方法,本文詳細(xì)分析了Mysql中對(duì)RAND()的幾種優(yōu)化方法,并最終得出一個(gè)結(jié)論,需要的朋友可以參考下2014-07-07MySQL時(shí)間戳與日期格式的相互轉(zhuǎn)換
在MySQL數(shù)據(jù)庫(kù)中,時(shí)間戳和日期格式是常用的數(shù)據(jù)類型,在MySQL中,我們可以使用函數(shù)還相互轉(zhuǎn)換時(shí)間戳和日期格式,下面我將詳細(xì)的給大家介紹如何進(jìn)行轉(zhuǎn)換,并提供相應(yīng)的代碼示例,感興趣的小伙伴跟著小編一起來(lái)看看吧2024-01-01MySQL中的count(*)?和?count(1)?區(qū)別性能對(duì)比分析
這篇文章主要介紹了MySQL中的count(*)和count(1)區(qū)別性能對(duì)比,本節(jié)還介紹了我們常說的索引下推,結(jié)合實(shí)例代碼給大家介紹的非常詳細(xì),需要的朋友可以參考下2023-05-05