MySQL是如何處理排序的(最新推薦)
前言
在MySQL的查詢(xún)中常常會(huì)用到order by
和group by
這兩個(gè)關(guān)鍵字
它們的相同點(diǎn)是都會(huì)對(duì)字段進(jìn)行排序,那查詢(xún)語(yǔ)句中的排序是如何實(shí)現(xiàn)的呢?
當(dāng)使用的查詢(xún)語(yǔ)句需要進(jìn)行排序時(shí)有兩種處理情況:
- 當(dāng)前記錄本來(lái)就是有序的,不需要進(jìn)行排序
- 當(dāng)前記錄未保持順序,需要排序
使用索引保證有序
對(duì)于第一種情況,常常是使用二級(jí)索引中索引列的有序來(lái)保證結(jié)果集有序,從而不需要進(jìn)行排序
對(duì)于表a,為a2建立二級(jí)索引,那么在二級(jí)索引上a2就是有序的
CREATE TABLE `a` ( `a1` int(11) NOT NULL AUTO_INCREMENT, `a2` varchar(255) CHARACTER SET utf8mb4 DEFAULT NULL, `a3` varchar(255) DEFAULT NULL, PRIMARY KEY (`a1`), KEY `idx_a2` (`a2`) ) ENGINE=InnoDB AUTO_INCREMENT=76 DEFAULT CHARSET=utf8;
select * from a order by a.a2 limit 10
當(dāng)優(yōu)化器選擇使用a2索引時(shí),a2列的記錄本身就是有序的,因此不需要再使用其他開(kāi)銷(xiāo)進(jìn)行排序
當(dāng)然,優(yōu)化器也有可能不使用a2索引(當(dāng)優(yōu)化器認(rèn)為使用a2回表開(kāi)銷(xiāo)太大時(shí)會(huì)使用全表掃描)
當(dāng)優(yōu)化器使用的索引上a2無(wú)序時(shí),則會(huì)通過(guò)其他手段對(duì)結(jié)果進(jìn)行排序
filesort
當(dāng)執(zhí)行計(jì)劃的Extra附加信息中出現(xiàn)Using filesort
時(shí),會(huì)使用sort_buffer對(duì)結(jié)果進(jìn)行排序
sort_buffer是一塊用于排序的內(nèi)存,sort_buffer可能存放查詢(xún)需要的所有字段,也可能只存放需要排序的字段和主鍵
show variables like 'max_length_for_sort_data'
當(dāng)查詢(xún)需要的字段長(zhǎng)度小于max_length_for_sort_data
時(shí),則會(huì)將查詢(xún)需要的所有字段放入sort_buffer中,然后對(duì)需要排序的列進(jìn)行排序,最后返回結(jié)果
當(dāng)查詢(xún)需要的字段長(zhǎng)度大于max_length_for_sort_data
時(shí),只會(huì)將需要排序的字段和主鍵值放入sort_buffer中,等到排序后再去查詢(xún)聚簇索引獲取需要查詢(xún)的列(相當(dāng)于又多了一次回表)
在sort_buffer中進(jìn)行排序時(shí),如果內(nèi)存足夠則會(huì)在內(nèi)存中進(jìn)行排序,如果內(nèi)存不夠則會(huì)使用磁盤(pán)的臨時(shí)文件來(lái)輔助排序
開(kāi)啟optimizer_trace
可以查看是否使用臨時(shí)文件輔助排序
#開(kāi)啟優(yōu)化器追蹤 SET optimizer_trace='enabled=on'; ? #sql語(yǔ)句 select * from student order by student_name limit 10000; ? #查看優(yōu)化器追蹤的信息 SELECT * FROM `information_schema`.`OPTIMIZER_TRACE`\G;
排序使用的算法是歸并算法,先分割成多個(gè)小文件排序再進(jìn)行合并
其中number_of_tmp_files
為使用到的臨時(shí)文件數(shù)量,sort_buffer_size
為sort_buffer大小
因此當(dāng)使用order by、group by等需要排序的關(guān)鍵字時(shí),最好建立合適的索引
如果數(shù)據(jù)量小可以在sort buffer中排序,如果數(shù)據(jù)量太大還需要與磁盤(pán)交互
總結(jié)
當(dāng)查詢(xún)語(yǔ)句需要排序時(shí)會(huì)分為不用排序和需要排序兩種情況
當(dāng)使用的索引有序時(shí)則不用再進(jìn)行排序,通過(guò)索引來(lái)保證有序
當(dāng)使用的索引無(wú)序時(shí)則會(huì)使用sort_buffer進(jìn)行排序,當(dāng)查詢(xún)字段的長(zhǎng)度未超過(guò)限制時(shí),sort_buffer中每條記錄會(huì)存儲(chǔ)需要查詢(xún)的列
如果超過(guò)限制,則sort_buffer只會(huì)存儲(chǔ)需要排序的列和主鍵值,排序后再通過(guò)主鍵值進(jìn)行回表獲取需要查詢(xún)的列
當(dāng)數(shù)據(jù)量太大不夠在內(nèi)存中排序完,會(huì)使用磁盤(pán)頁(yè)輔助排序,使用歸并算法將排序數(shù)據(jù)分散在多個(gè)頁(yè)再合并
可以通過(guò)追蹤優(yōu)化器 optimizer_trace 分析內(nèi)容查看輔助頁(yè)的數(shù)量等信息
為需要排序的列建立合適的索引,避免使用磁盤(pán)頁(yè)輔助排序
當(dāng)無(wú)法使用索引時(shí)可以調(diào)整sort buffer 或 max_length_for_sort_data(謹(jǐn)慎)
到此這篇關(guān)于聊聊MySQL是如何處理排序的的文章就介紹到這了,更多相關(guān)mysql排序內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
mysql表分區(qū)的方式和實(shí)現(xiàn)代碼示例
通俗地講表分區(qū)是將一個(gè)大表,根據(jù)條件分割成若干個(gè)小表,下面這篇文章主要給大家介紹了關(guān)于mysql表分區(qū)的方式和實(shí)現(xiàn)代碼,文中通過(guò)代碼介紹的非常詳細(xì),需要的朋友可以參考下2024-02-02MySql使用skip-name-resolve解決外網(wǎng)鏈接客戶(hù)端過(guò)慢問(wèn)題
在騰訊云上面搭建的mysql使用開(kāi)發(fā)的電腦上navicat進(jìn)行訪問(wèn)時(shí)總是特別的慢,原來(lái)是Mysql會(huì)對(duì)請(qǐng)求的地址進(jìn)行域名解析,開(kāi)發(fā)的電腦并沒(méi)有域名,所以會(huì)導(dǎo)致特別的慢,下面通過(guò)本文給大家分享MySql使用skip-name-resolve解決外網(wǎng)鏈接客戶(hù)端過(guò)慢問(wèn)題2017-07-07在同一臺(tái)機(jī)器上運(yùn)行多個(gè) MySQL 服務(wù)
在同一臺(tái)機(jī)器上運(yùn)行多個(gè) MySQL 服務(wù)...2006-11-11MySQL存儲(chǔ)時(shí)間類(lèi)型選擇的問(wèn)題講解
今天小編就為大家分享一篇關(guān)于MySQL存儲(chǔ)時(shí)間類(lèi)型選擇的問(wèn)題講解,小編覺(jué)得內(nèi)容挺不錯(cuò)的,現(xiàn)在分享給大家,具有很好的參考價(jià)值,需要的朋友一起跟隨小編來(lái)看看吧2019-03-03MySQL窗口函數(shù) over(partition by)的用法
本文主要介紹了MySQL窗口函數(shù) over(partition by)的用法, partition by相比較于group by,能夠在保留全部數(shù)據(jù)的基礎(chǔ)上,只對(duì)其中某些字段做分組排序,下面就來(lái)介紹一下具體用法,感興趣的可以了解一下2024-02-02MySQL數(shù)據(jù)庫(kù)中使用REPLACE函數(shù)示例及實(shí)際應(yīng)用
本文詳細(xì)介紹了MySQL中的REPLACE函數(shù),包括其基本語(yǔ)法、用法和實(shí)際應(yīng)用場(chǎng)景,REPLACE函數(shù)主要用于替換字符串中的某些子字符串,對(duì)大小寫(xiě)敏感,文章還通過(guò)多個(gè)示例展示了REPLACE函數(shù)的實(shí)際應(yīng)用,需要的朋友可以參考下2024-10-10MYSQL數(shù)據(jù)庫(kù)如何設(shè)置主從同步
大家好,本篇文章主要講的是MYSQL數(shù)據(jù)庫(kù)如何設(shè)置主從同步,感興趣的同學(xué)趕快來(lái)看一看吧,對(duì)你有幫助的話記得收藏一下2022-01-01Java實(shí)現(xiàn)獲得MySQL數(shù)據(jù)庫(kù)中所有表的記錄總數(shù)可行方法
可以通過(guò)SELECT COUNT(*) FROM table_name查詢(xún)某個(gè)表中有多少條記錄。本文給出兩種可行的Java程序查詢(xún)所有別的記錄方法,感興趣朋友可以了解下2013-06-06