欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

為什么MySQL分頁用limit會越來越慢

 更新時間:2021年07月25日 10:36:25   作者:程序員阿牛  
在mysql中l(wèi)imit可以實現快速分頁,但是如果數據到了幾百萬時我們的limit必須優(yōu)化才能有效的合理的實現分頁了,否則可能卡死你的服務器

阿牛新入職了一家新公司,第一個任務是根據條件導出訂單表中的數據到文件中,阿牛心想:這也太簡單了,于是很快寫好了如下語句,并且告訴測試自己的代碼是免測產品。

語句如下:

select * from orders where name=‘lilei' and create_time>'2020-01-01 00:00:00' limit start,end

沒想到上線一段時間后,生產開始預警,顯示這條sql為慢SQL,執(zhí)行時間50多秒,嚴重影響到了業(yè)務。
阿牛趕緊請教大佬猿猿幫忙查找原因,猿猿很快就幫其解決了,并且給阿牛做了以下實驗:

一、測試實驗

mysql分頁直接用limit start, count分頁語句:

select * from product limit start, count

當起始頁較小時,查詢沒有性能問題,我們分別看下從10, 100, 1000, 10000開始分頁的執(zhí)行時間(每頁取20條),如下:

select * from product limit 10, 20 0.016秒
select * from product limit 100, 20 0.016秒
select * from product limit 1000, 20 0.047秒
select * from product limit 10000, 20 0.094秒

我們已經看出隨著起始記錄的增加,時間也隨著增大, 這說明分頁語句limit跟起始頁碼是有很大關系的,
那么我們把起始記錄改為40w看下(也就是記錄的一半左右)

select * from product limit 400000, 20 3.229秒

再看我們獲取最后一頁記錄的時間

select * from product limit 866613, 20 37.44秒

像這種分頁最大的頁碼頁顯然這種時間是無法忍受的。
從中我們也能總結出兩件事情:
limit語句的查詢時間與起始記錄的位置成正比。
mysql的limit語句是很方便,但是對記錄很多的表并不適合直接使用。

二、 對limit分頁問題的性能優(yōu)化方法

2.1 利用表的覆蓋索引來加速分頁查詢

我們都知道,利用了索引查詢的語句中如果只包含了那個索引列(覆蓋索引),那么這種情況會查詢很快。
因為利用索引查找有優(yōu)化算法,且數據就在查詢索引上面,不用再去找相關的數據地址了,這樣節(jié)省了很多時間。
另外Mysql中也有相關的索引緩存,在并發(fā)高的時候利用緩存就效果更好了。
在我們的例子中,我們知道id字段是主鍵,自然就包含了默認的主鍵索引?,F在讓我們看看利用覆蓋索引的查詢效果如何:
這次我們之間查詢最后一頁的數據(利用覆蓋索引,只包含id列),如下:

select id from product limit 866613, 20

查詢時間為0.2秒,相對于查詢了所有列的37.44秒,提升了大概100多倍的速度。
那么如果我們也要查詢所有列,有兩種方法,

2.2 利用 id>=的形式:

SELECT * FROM product 
WHERE ID > =(select id from product limit 866613, 1) limit 20

查詢時間為0.2秒,簡直是一個質的飛躍啊。

2.3 利用join

SELECT * FROM product a 
JOIN (select id from product limit 866613, 20) b ON a.ID = b.id

總結:

是不是認為我沒說理由,原因就是使用select * 的情況下直接用limit 600000,10 掃描的是約60萬條數據,并且是需要回表60W次,也就是說大部分性能都耗在隨機訪問上,到頭來只用到10條數據,如果先查出來ID,再關聯去查詢記錄,就會快很多,因為索引查找符合條件的ID很快,然后再回表10次。就可以拿到我們想要的數據。

到此這篇關于為什么MySQL分頁用limit會越來越慢的文章就介紹到這了,更多相關MySQL分頁limit慢內容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!

相關文章

  • mysql創(chuàng)建的外鍵無法保存的原因以及處理辦法

    mysql創(chuàng)建的外鍵無法保存的原因以及處理辦法

    這篇文章主要介紹了mysql創(chuàng)建的外鍵無法保存的原因以及處理辦法,具有很好的參考價值,希望對大家有所幫助。如有錯誤或未考慮完全的地方,望不吝賜教
    2022-09-09
  • Mysql CPU占用高的問題解決方法小結

    Mysql CPU占用高的問題解決方法小結

    最近發(fā)現php網站發(fā)布信息比較慢,而且同網站目錄下的asp經常登錄后立即就重新登錄,立即考慮到服務器資源占用問題,所以進服務器看到原來mysql占用率較高 25-60%左右,偶爾能跑到100%,所有導致上述問題的發(fā)生
    2012-06-06
  • Mysql隔離性之Read View的用法說明

    Mysql隔離性之Read View的用法說明

    這篇文章主要介紹了Mysql隔離性之Read View的用法說明,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2021-03-03
  • MySQL文本文件導入及批處理模式應用說明

    MySQL文本文件導入及批處理模式應用說明

    MySQL文本文件導入及批處理模式應用說明,需要的朋友可以參考下。
    2011-09-09
  • mysql update語句的執(zhí)行過程詳解

    mysql update語句的執(zhí)行過程詳解

    本文詳細介紹了,mysql中update語句的執(zhí)行過程,系統全面的學習下update更新語句的執(zhí)行過程,有需要的朋友可以參考下
    2020-03-03
  • mysql 定時任務的實現與使用方法示例

    mysql 定時任務的實現與使用方法示例

    這篇文章主要介紹了mysql 定時任務的實現與使用方法,結合實例形式分析了MySQL定時任務的相關原理、創(chuàng)建及使用方法,需要的朋友可以參考下
    2019-11-11
  • 解決mysql.server?start執(zhí)行報錯ERROR!The?server?quit?without?updating?PID?file

    解決mysql.server?start執(zhí)行報錯ERROR!The?server?quit?without?u

    這篇文章主要介紹了解決mysql.server?start執(zhí)行報錯ERROR!The?server?quit?without?updating?PID?file問題,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教
    2023-09-09
  • Mac os 解決無法使用localhost連接mysql問題

    Mac os 解決無法使用localhost連接mysql問題

    今天在mac上搭建好了php的環(huán)境,把先前在window、linux下運行良好的程序放在mac上,居然出現訪問不了數據庫,數據庫連接的host用的是localhost,可以確認數據庫配置是正確的,下面特為大家分享下
    2014-05-05
  • centos 6.9安裝mysql的詳細教程

    centos 6.9安裝mysql的詳細教程

    這篇文章主要介紹了centos 6.9安裝mysql的詳細教程,非常不錯,具有參考借鑒價值,需要的朋友可以參考下
    2017-07-07
  • mysql錯誤代碼error2003的問題及解決

    mysql錯誤代碼error2003的問題及解決

    這篇文章主要介紹了mysql錯誤代碼error2003的問題及解決,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教
    2024-05-05

最新評論