MySQL 大表的count()優(yōu)化實(shí)現(xiàn)
以下是基于我結(jié)合B+樹(shù)的數(shù)據(jù)結(jié)構(gòu)和對(duì)實(shí)驗(yàn)結(jié)果的推測(cè)作出的判斷,如有錯(cuò)誤,懇請(qǐng)指正!
今天實(shí)驗(yàn)了一下MySQL的count()操作優(yōu)化, 以下討論基于mysql5.7 InnoDB存儲(chǔ)引擎. x86 windows操作系統(tǒng)。
創(chuàng)建的表的結(jié)構(gòu)如下(數(shù)據(jù)量為100萬(wàn)):
首先是關(guān)于mysql的count(*),count(PK), count(1)哪個(gè)快的問(wèn)題。
實(shí)現(xiàn)結(jié)果如下:
并沒(méi)有什么區(qū)別!加上了WHERE子句之后3個(gè)查詢的時(shí)間也是相同的,我就不貼圖片了。
之前在公司的時(shí)候就寫(xiě)過(guò)一個(gè)select count(*) from table
的SQL語(yǔ)句,在數(shù)據(jù)多的時(shí)候非常慢。所以要怎么優(yōu)化呢?
這要從InnoDB的索引說(shuō)起, InnoDB的索引是B+Tree。
對(duì)主鍵索引來(lái)說(shuō):它只有在葉子節(jié)點(diǎn)上存儲(chǔ)數(shù)據(jù),它的key是主鍵,并且value為整條數(shù)據(jù)。
對(duì)輔助索引來(lái)說(shuō):key為建索引的列,value為主鍵。
這給我們兩個(gè)信息:
1. 根據(jù)主鍵會(huì)查到整條數(shù)據(jù)
2. 根據(jù)輔助索引只能查到主鍵,然后必須通過(guò)主鍵再查到剩余信息。
所以如果要優(yōu)化count(*)操作的話,我們需要找一個(gè)短小的列,為它建立輔助索引。
在我的例子中就是status
,雖然它的”severelity”幾乎為0.
先建立索引:ALTER TABLE test1 ADD INDEX (
status);
然后查詢,如下圖:
可以看到,查詢時(shí)間從3.35s下降到了0.26s,查詢速度提升近13倍。
如果索引是str
這一列,結(jié)果又會(huì)是怎么樣呢?
先建立索引: alter table test1 add index (str)
結(jié)果如下:
可以看到,時(shí)間為0.422s,也很快,但是比起status
這列還是有著1.5倍左右的差距。
再大膽一點(diǎn)做個(gè)實(shí)驗(yàn),我把status
這列的索引刪掉,建立一個(gè)status
和left(omdb,200)
(這一列平均1000個(gè)字符)的聯(lián)合索引,然后看查詢時(shí)間。
建立索引: alter table test1 add index (
status,omdb(200))
結(jié)果如下:
時(shí)間為1.172s
alter table test1 add index (status,imdbid);
補(bǔ)充!!
要注意索引失效的情況!
建立了索引后正常的的樣子:
可以看到key_len為6, Extra的說(shuō)明是using index.
而如果索引失效的話:
索引失效有很多種情況,比如使用函數(shù),!=操作等,具體請(qǐng)參考官方文檔。
對(duì)MySQL沒(méi)有很深的研究,以上是基于我結(jié)合B+樹(shù)的數(shù)據(jù)結(jié)構(gòu)和對(duì)實(shí)驗(yàn)結(jié)果的推測(cè)作出的判斷,如有錯(cuò)誤,懇請(qǐng)指正!
到此這篇關(guān)于MySQL 大表的count()優(yōu)化實(shí)現(xiàn)的文章就介紹到這了,更多相關(guān)MySQL 大表count()優(yōu)化內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
- MySQL中聚合函數(shù)count的使用和性能優(yōu)化技巧
- 關(guān)于mysql中innodb的count優(yōu)化問(wèn)題分享
- 聊聊MySQL的COUNT(*)的性能
- 詳解 MySQL中count函數(shù)的正確使用方法
- 淺談MySQL 統(tǒng)計(jì)行數(shù)的 count
- mysql count提高方法總結(jié)
- MySQL中無(wú)過(guò)濾條件的count詳解
- MySQL中count(*)、count(1)和count(col)的區(qū)別匯總
- mySQL count多個(gè)表的數(shù)據(jù)實(shí)例詳解
- MySQL COUNT函數(shù)的使用與優(yōu)化
相關(guān)文章
MySQL核心參數(shù)優(yōu)化文件my.ini實(shí)現(xiàn)
本文主要介紹了MySQL核心參數(shù)優(yōu)化文件my.ini實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2023-01-01INSERT INTO .. ON DUPLICATE KEY更新多行記錄
本文詳細(xì)的介紹了關(guān)于INSERT INTO .. ON DUPLICATE KEY更新多行記錄,有需要了解的同學(xué)可參考一下2013-08-08淺談MySQL數(shù)據(jù)庫(kù)表鎖了怎么解鎖
在使用 MySQL 數(shù)據(jù)庫(kù)時(shí),有時(shí)候會(huì)發(fā)生某個(gè)表被鎖住的情況,這可能會(huì)導(dǎo)致其他用戶無(wú)法對(duì)該表進(jìn)行讀寫(xiě)操作,影響系統(tǒng)的正常運(yùn)行,本文主要介紹了淺談MySQL數(shù)據(jù)庫(kù)表鎖了怎么解鎖,感興趣的可以了解一下2023-10-10Windows下安裝MySQL 5.7.17壓縮版中遇到的坑
最近發(fā)現(xiàn)原來(lái)好端端的MySQL突然間不能用了,無(wú)奈只能重新下載了最新的MySQL 5.7.17 Community 壓縮版 for Windows 64-bit。但在安裝過(guò)程中遇到了一些意外的問(wèn)題,通過(guò)查找相關(guān)資料也解決了,所以想著總結(jié)出來(lái),方便需要的朋友們可以參考借鑒,下面來(lái)一起看看吧。2017-01-01MYSQL如何自動(dòng)為查詢數(shù)據(jù)的結(jié)果編上序號(hào)詳解
這篇文章主要給大家介紹了關(guān)于MYSQL如何自動(dòng)為查詢數(shù)據(jù)的結(jié)果編上序號(hào)的相關(guān)資料,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家學(xué)習(xí)或者使用mysql具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起看看吧。2017-11-11