mysql 分頁優(yōu)化解析
更新時(shí)間:2008年04月30日 18:58:38 作者:
似乎討論分頁的人很少,難道大家都沉迷于limit m,n?在有索引的情況下,limit m,n速度足夠,可是在復(fù)雜條件搜索時(shí),where somthing order by somefield+somefieldmysql會(huì)搜遍數(shù)據(jù)庫,找出“所有”符合條件的記錄,然后取出m,n條記錄。
如果你的數(shù)據(jù)量有幾十萬條,用戶又搜索一些很通俗的詞,然后要依次讀最后幾頁重溫舊夢。mysql該很悲壯的不停操作硬盤。
所以,可以試著讓mysql也存儲(chǔ)分頁,當(dāng)然要程序配合。(這里只是提出一個(gè)設(shè)想,歡迎大家一起討論)
ASP的分頁:在ASP系統(tǒng)中有Recordset對象來實(shí)現(xiàn)分頁,但是大量數(shù)據(jù)放在內(nèi)存中,而且不知道什么時(shí)候才失效(請ASP高手指點(diǎn)). SQL數(shù)據(jù)庫分頁:用存儲(chǔ)過程+游標(biāo)方式分頁,具體實(shí)現(xiàn)原理不是很清楚,設(shè)想如果用一次查詢就得到需要的結(jié)果,或者是id集,需要后續(xù)頁時(shí)只要按照結(jié)果中的IDs讀出相關(guān)記錄。這樣只要很小的空間保留本次查詢的所有IDs. (SQL中的查詢結(jié)果不知道怎樣清楚過期垃圾?)
這樣,可以讓mysql模擬存儲(chǔ)分頁機(jī)制:
1. select id from $table where $condition order by $field limit $max_pages*$count;查詢符合條件的IDs.限定最大符合條件的記錄數(shù)量,也可以不加。
2. 因?yàn)閜hp在執(zhí)行結(jié)束后所有變量都要lost,所以可以考慮:方案a. 在mysql建立臨時(shí)表,查詢結(jié)果用一個(gè)時(shí)間或隨機(jī)數(shù)作為唯一標(biāo)志插入。其中建立page1~pagen個(gè)字段,每個(gè)字段保存該頁中需要的ids, 這樣一個(gè)id對一條記錄.方案b. 如果打開session,也可以放在session中保存,實(shí)際上是放在文件中保存。建立一個(gè)$IDs數(shù)組,$IDs[1]~$IDs[$max_pages]. 考慮到有時(shí)候用戶會(huì)開幾個(gè)窗口同時(shí)查詢,要為$ids做一個(gè)唯一標(biāo)志,避免查詢結(jié)果相互覆蓋。二維數(shù)組和$$var都是好辦法。
3. 在每頁頁的請求中,直接找到對應(yīng)的IDs,中間以","間隔:select * from $table where id in ($ids); 速度絕對快
4. 收尾要考慮查詢結(jié)果的自動(dòng)清除,可以設(shè)置定時(shí)或者按比例隨機(jī)清楚。如果用mysql臨時(shí)表要加上一個(gè)時(shí)間標(biāo)志字段,session中要加入$IDs["time"]=time(); 在一定時(shí)間以后不操作視為過期數(shù)據(jù)。
5. 如果要優(yōu)化,可以考慮用把1和2.a中的語句合并成select ...... into ....
Note:1.以上只是針對mysql的修補(bǔ)方案,希望mysql哪天能把這些功能加進(jìn)去2.其它數(shù)據(jù)庫也可以套用。3.如果其它數(shù)據(jù)庫還有更先進(jìn)的分頁方式,請告訴我或mailto: steeven@kali.com.cn4.如果真的有很多數(shù)據(jù)要查詢,還是和mysql再見吧,sql,oracle都提供了更先進(jìn)的關(guān)鍵詞索引查詢。
精益求精,以上只是拋磚引玉,歡迎共同探討分頁問題。(也可關(guān)于其它數(shù)據(jù)庫)希望有一天能把各種分頁方式整理出來供新手參考。
所以,可以試著讓mysql也存儲(chǔ)分頁,當(dāng)然要程序配合。(這里只是提出一個(gè)設(shè)想,歡迎大家一起討論)
ASP的分頁:在ASP系統(tǒng)中有Recordset對象來實(shí)現(xiàn)分頁,但是大量數(shù)據(jù)放在內(nèi)存中,而且不知道什么時(shí)候才失效(請ASP高手指點(diǎn)). SQL數(shù)據(jù)庫分頁:用存儲(chǔ)過程+游標(biāo)方式分頁,具體實(shí)現(xiàn)原理不是很清楚,設(shè)想如果用一次查詢就得到需要的結(jié)果,或者是id集,需要后續(xù)頁時(shí)只要按照結(jié)果中的IDs讀出相關(guān)記錄。這樣只要很小的空間保留本次查詢的所有IDs. (SQL中的查詢結(jié)果不知道怎樣清楚過期垃圾?)
這樣,可以讓mysql模擬存儲(chǔ)分頁機(jī)制:
1. select id from $table where $condition order by $field limit $max_pages*$count;查詢符合條件的IDs.限定最大符合條件的記錄數(shù)量,也可以不加。
2. 因?yàn)閜hp在執(zhí)行結(jié)束后所有變量都要lost,所以可以考慮:方案a. 在mysql建立臨時(shí)表,查詢結(jié)果用一個(gè)時(shí)間或隨機(jī)數(shù)作為唯一標(biāo)志插入。其中建立page1~pagen個(gè)字段,每個(gè)字段保存該頁中需要的ids, 這樣一個(gè)id對一條記錄.方案b. 如果打開session,也可以放在session中保存,實(shí)際上是放在文件中保存。建立一個(gè)$IDs數(shù)組,$IDs[1]~$IDs[$max_pages]. 考慮到有時(shí)候用戶會(huì)開幾個(gè)窗口同時(shí)查詢,要為$ids做一個(gè)唯一標(biāo)志,避免查詢結(jié)果相互覆蓋。二維數(shù)組和$$var都是好辦法。
3. 在每頁頁的請求中,直接找到對應(yīng)的IDs,中間以","間隔:select * from $table where id in ($ids); 速度絕對快
4. 收尾要考慮查詢結(jié)果的自動(dòng)清除,可以設(shè)置定時(shí)或者按比例隨機(jī)清楚。如果用mysql臨時(shí)表要加上一個(gè)時(shí)間標(biāo)志字段,session中要加入$IDs["time"]=time(); 在一定時(shí)間以后不操作視為過期數(shù)據(jù)。
5. 如果要優(yōu)化,可以考慮用把1和2.a中的語句合并成select ...... into ....
Note:1.以上只是針對mysql的修補(bǔ)方案,希望mysql哪天能把這些功能加進(jìn)去2.其它數(shù)據(jù)庫也可以套用。3.如果其它數(shù)據(jù)庫還有更先進(jìn)的分頁方式,請告訴我或mailto: steeven@kali.com.cn4.如果真的有很多數(shù)據(jù)要查詢,還是和mysql再見吧,sql,oracle都提供了更先進(jìn)的關(guān)鍵詞索引查詢。
精益求精,以上只是拋磚引玉,歡迎共同探討分頁問題。(也可關(guān)于其它數(shù)據(jù)庫)希望有一天能把各種分頁方式整理出來供新手參考。
相關(guān)文章
SQL注入的風(fēng)險(xiǎn)與解決方案實(shí)戰(zhàn)解析
這篇文章主要為大家詳細(xì)介紹了SQL注入的風(fēng)險(xiǎn)分析與解決方案的相關(guān)知識,文中的示例代碼講解詳細(xì),感興趣的小伙伴可以跟隨小編一起學(xué)習(xí)一下2025-09-09
完美解決MySQL數(shù)據(jù)庫服務(wù)器CPU飆升問題
這篇文章主要介紹了解決 MySQL 數(shù)據(jù)庫服務(wù)器 CPU 飆升的方法,包括定位問題(如使用工具監(jiān)控、查看慢查詢?nèi)罩荆?、?yōu)化 SQL 查詢、調(diào)整配置參數(shù)、優(yōu)化數(shù)據(jù)庫架構(gòu)、檢查硬件資源、處理鎖競爭問題等,還通過電商業(yè)務(wù)系統(tǒng)的案例進(jìn)行了詳細(xì)分析及給出解決方法,最終優(yōu)化效果顯著2025-02-02
一臺(tái)電腦(windows系統(tǒng))安裝兩個(gè)版本MYSQL方法步驟
由于新舊項(xiàng)目數(shù)據(jù)庫版本差距太大,編碼格式不同,引擎也不同,所以只好裝兩個(gè)數(shù)據(jù)庫,這篇文章主要給大家介紹了關(guān)于一臺(tái)電腦(windows系統(tǒng))安裝兩個(gè)版本MYSQL的方法步驟,文中通過實(shí)例代碼介紹的非常詳細(xì),需要的朋友可以參考下2023-03-03
Windows7 64位安裝最新版本MySQL服務(wù)器的圖文教程
本文通過圖文并茂的形式給大家介紹了Windows7 64位安裝最新版本MySQL服務(wù)器的教程,非常不錯(cuò),具有一定的參考借鑒價(jià)值,需要的朋友參考下吧2018-06-06
MySQL 創(chuàng)建索引(Create Index)的方法和語法結(jié)構(gòu)及例子
MySQL 創(chuàng)建索引(Create Index)的方法和語法結(jié)構(gòu)及例子2009-07-07
兩種方法實(shí)現(xiàn)mysql分組計(jì)數(shù),范圍匯總
這篇文章主要介紹了兩種方法實(shí)現(xiàn)mysql分組計(jì)數(shù),范圍匯總,文中示例代碼非常詳細(xì),幫助大家更好的理解和學(xué)習(xí),感興趣的朋友可以了解下2020-07-07

