mysql中的group?by用法指南
什么是 GROUP BY?
在 MySQL 中,GROUP BY 是一個(gè)用于對(duì)查詢結(jié)果進(jìn)行分組的關(guān)鍵字。它的核心作用是:將具有相同字段值的多行數(shù)據(jù)“合并”成一組,然后對(duì)每組執(zhí)行聚合計(jì)算。
?? 簡單理解:
“按某個(gè)維度歸類,再統(tǒng)計(jì)每類的情況”
比如:
- 按部門統(tǒng)計(jì)員工人數(shù)
- 按商品類別統(tǒng)計(jì)銷售額
- 按日期統(tǒng)計(jì)訂單量
MySQL中的GROUP BY是數(shù)據(jù)聚合分析的核心功能,主要用于將結(jié)果集按指定列分組,并結(jié)合聚合函數(shù)進(jìn)行統(tǒng)計(jì)計(jì)算。以下從基本語法到高級(jí)用法進(jìn)行詳細(xì)解析:
一、基本語法與核心功能
SELECT 分組列, 聚合函數(shù)(計(jì)算列) FROM 表名 [WHERE 條件] GROUP BY 分組列 [HAVING 分組過濾條件] [ORDER BY 排序列];
核心功能:
- 數(shù)據(jù)分組:按一列或多列的值將數(shù)據(jù)劃分為邏輯組。
- 聚合計(jì)算:對(duì)每個(gè)分組應(yīng)用聚合函數(shù)(如
COUNT、SUM、AVG、MAX、MIN)進(jìn)行統(tǒng)計(jì)。 - 結(jié)果過濾:通過
HAVING對(duì)分組后的結(jié)果進(jìn)行篩選(區(qū)別于WHERE的分組前過濾)。
二、基礎(chǔ)用法示例
1. 單列分組統(tǒng)計(jì)
統(tǒng)計(jì)每個(gè)部門的員工數(shù)量和平均工資:
SELECT department, COUNT(*) AS emp_count, AVG(salary) AS avg_salary FROM employees GROUP BY department; --
2. 多列組合分組
按部門和職位統(tǒng)計(jì)員工數(shù)量:
SELECT department, job_title, COUNT(*) FROM employees GROUP BY department, job_title; --
3. 與WHERE結(jié)合使用
僅統(tǒng)計(jì)薪資超過2000元的員工部門平均工資:
SELECT department, AVG(salary) FROM employees WHERE salary > 2000 GROUP BY department; --
三、高級(jí)特性與擴(kuò)展
1. HAVING子句過濾分組
篩選員工數(shù)量超過5人的部門:
SELECT department, COUNT(*) AS emp_count FROM employees GROUP BY department HAVING emp_count > 5; --
2. WITH ROLLUP生成匯總行
生成部門及職位的薪資小計(jì)和總計(jì):
SELECT department, job_title, SUM(salary) FROM employees GROUP BY department, job_title WITH ROLLUP; --
3. GROUP_CONCAT合并列值
統(tǒng)計(jì)每個(gè)用戶購買的所有產(chǎn)品(逗號(hào)分隔):
SELECT user_id, GROUP_CONCAT(product_name SEPARATOR ', ') FROM orders GROUP BY user_id; --
4. 按表達(dá)式/函數(shù)分組
按年份統(tǒng)計(jì)訂單數(shù)量:
SELECT YEAR(order_date) AS year, COUNT(*) FROM orders GROUP BY YEAR(order_date); --
四、注意事項(xiàng)與常見錯(cuò)誤
ONLY_FULL_GROUP_BY模式
MySQL 8.0+默認(rèn)啟用該模式,要求SELECT中的非聚合列必須出現(xiàn)在GROUP BY中,否則報(bào)錯(cuò)。
-- 錯(cuò)誤示例(salary未聚合且未分組) SELECT department, salary FROM employees GROUP BY department; -- 修正方法:添加聚合函數(shù)或分組字段 SELECT department, MAX(salary) FROM employees GROUP BY department;
WHERE與HAVING的區(qū)別
WHERE在分組前過濾行數(shù)據(jù),不可使用聚合函數(shù)。HAVING在分組后過濾組數(shù)據(jù),必須與聚合條件結(jié)合。
性能優(yōu)化建議
- 在分組列上創(chuàng)建索引(如
ALTER TABLE employees ADD INDEX(department))。 - 避免對(duì)大表直接分組,可先通過臨時(shí)表或子查詢縮小數(shù)據(jù)范圍。
五、經(jīng)典案例場景
1. 按時(shí)間維度聚合
統(tǒng)計(jì)每月的銷售總額:
SELECT YEAR(sale_date) AS year, MONTH(sale_date) AS month, SUM(amount) FROM sales GROUP BY year, month; --
2. 多層級(jí)統(tǒng)計(jì)
分析每個(gè)客戶每年的訂單總金額及平均金額:
SELECT customer_id, YEAR(order_date),
SUM(total_amount), AVG(total_amount)
FROM orders
GROUP BY customer_id, YEAR(order_date); --
3. 數(shù)據(jù)去重
查找重復(fù)郵箱的用戶:
SELECT email, COUNT(*) FROM users GROUP BY email HAVING COUNT(*) > 1; --
六、聚合效率優(yōu)化
在MySQL中優(yōu)化GROUP BY聚合效率需要從索引設(shè)計(jì)、查詢邏輯、執(zhí)行引擎特性等多維度入手。以下基于最新優(yōu)化實(shí)踐和數(shù)據(jù)庫引擎特性,總結(jié)9大核心優(yōu)化策略:
1、索引優(yōu)化策略
復(fù)合索引精準(zhǔn)匹配分組列
• 創(chuàng)建與GROUP BY順序完全匹配的復(fù)合索引(如GROUP BY a,b則創(chuàng)建(a,b)索引),可觸發(fā)松散索引掃描,減少90%以上的磁盤I/O。
• 典型案例:當(dāng)對(duì)(department, job_title)分組時(shí),復(fù)合索引idx_dept_job可使查詢跳過全表掃描,直接通過索引完成分組。
覆蓋索引避免回表
• 確保SELECT列與聚合函數(shù)涉及的列均包含在索引中。例如索引(category, sales),查詢SELECT category, SUM(sales)時(shí)可直接通過索引完成計(jì)算,無需訪問數(shù)據(jù)行。
利用函數(shù)索引應(yīng)對(duì)復(fù)雜分組
• 對(duì)含表達(dá)式的分組(如YEAR(date_col)),創(chuàng)建虛擬列或函數(shù)索引(MySQL 8.0+支持)。例如:
ALTER TABLE orders ADD COLUMN year_date INT AS (YEAR(order_date)) VIRTUAL; CREATE INDEX idx_year ON orders(year_date);
2、查詢?cè)O(shè)計(jì)與執(zhí)行優(yōu)化
減少分組字段數(shù)量與復(fù)雜度
• 每增加一個(gè)分組字段,排序復(fù)雜度呈指數(shù)級(jí)增長。優(yōu)先合并相關(guān)字段(如將province和city合并為region字段)。
• 避免在GROUP BY中使用函數(shù),否則索引失效。需改寫為基于原字段分組,如將GROUP BY DATE(created_at)改為GROUP BY created_at_date預(yù)計(jì)算列。
分階段過濾與聚合
• 先通過子查詢過濾無關(guān)數(shù)據(jù)再分組:
SELECT department, AVG(salary) FROM (SELECT * FROM employees WHERE salary > 5000) AS filtered GROUP BY department; -- 比直接HAVING效率提升40%
內(nèi)存排序與臨時(shí)表優(yōu)化
• 調(diào)整tmp_table_size和max_heap_table_size參數(shù)(建議設(shè)置為物理內(nèi)存的20%),避免臨時(shí)表落盤。
• 監(jiān)控Created_tmp_disk_tables狀態(tài)變量,若頻繁出現(xiàn)磁盤臨時(shí)表,需優(yōu)化索引或拆分查詢。
3、高級(jí)優(yōu)化技術(shù)
分區(qū)表加速大數(shù)據(jù)處理
• 按時(shí)間或業(yè)務(wù)維度分區(qū)(如按月分區(qū)),使GROUP BY僅掃描特定分區(qū)。例如對(duì)10億級(jí)日志表按event_date分區(qū)后,月度統(tǒng)計(jì)耗時(shí)從分鐘級(jí)降至秒級(jí)。
物化視圖與結(jié)果緩存
• 對(duì)高頻聚合查詢使用物化視圖(如通過CREATE TABLE mv AS SELECT...定期刷新),減少實(shí)時(shí)計(jì)算壓力。
• 應(yīng)用層緩存重復(fù)查詢結(jié)果(如Redis緩存日匯總數(shù)據(jù)),降低數(shù)據(jù)庫負(fù)載。
并行查詢(MySQL 8.0+)
• 啟用parallel_query功能,通過多線程處理復(fù)雜分組:
SET SESSION optimizer_switch='parallel_query=on'; SELECT region, SUM(revenue) FROM sales GROUP BY region; -- 利用多核CPU加速
4、診斷工具與注意事項(xiàng)
• 執(zhí)行計(jì)劃分析
使用EXPLAIN FORMAT=JSON觀察using_index(是否用索引)、using_temporary(是否用臨時(shí)表)、filesort(排序方式)等關(guān)鍵指標(biāo)。
• 嚴(yán)格模式規(guī)避錯(cuò)誤
啟用ONLY_FULL_GROUP_BY模式,防止非聚合列誤用導(dǎo)致結(jié)果不穩(wěn)定。
性能優(yōu)化對(duì)比案例
| 場景 | 優(yōu)化前耗時(shí) | 優(yōu)化手段 | 優(yōu)化后耗時(shí) |
|---|---|---|---|
| 百萬級(jí)用戶行為分析 | 12.8s | 創(chuàng)建(user_id,action_time)覆蓋索引 | 1.2s |
| 十億級(jí)日志日聚合 | 3分鐘 | 按日分區(qū)+并行查詢 | 8秒 |
通過上述策略組合,可系統(tǒng)性解決GROUP BY性能瓶頸。實(shí)際應(yīng)用中建議結(jié)合EXPLAIN分析和A/B測試,選擇最適合業(yè)務(wù)場景的優(yōu)化方案。
七、擴(kuò)展知識(shí)
- NULL值的處理:
GROUP BY將NULL視為獨(dú)立分組。 - 排序結(jié)合:分組后使用
ORDER BY對(duì)結(jié)果排序(如按平均工資降序)。 - 動(dòng)態(tài)分組:通過
CASE WHEN實(shí)現(xiàn)條件分組(如按薪資區(qū)間統(tǒng)計(jì))。
通過靈活組合這些功能,GROUP BY可滿足復(fù)雜的數(shù)據(jù)分析需求。實(shí)際應(yīng)用中需結(jié)合索引優(yōu)化和查詢邏輯設(shè)計(jì),以提升執(zhí)行效率。
到此這篇關(guān)于mysql中的group by用法詳解的文章就介紹到這了,更多相關(guān)mysql group by用法內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
- mysql的group by函數(shù)使用方法
- MySQL的GROUP BY與COUNT()函數(shù)的使用方法及常見問題
- mysql中的group?by和between用法詳解
- mysql中的group by高級(jí)用法
- MySQL GROUP BY分組取字段最大值的方法示例
- MySQL中distinct和group by去重的區(qū)別解析
- MySQL中ONLY_FULL_GROUP_BY的使用小結(jié)
- MySQL 5.7升級(jí)8.0報(bào)異常:ONLY_FULL_GROUP_BY的問題解決
- 解決mysql @@sql_mode問題---only_full_group_by
- mysql group by 多個(gè)行轉(zhuǎn)換為一個(gè)字段
相關(guān)文章
解決MySQL安裝重裝時(shí)出現(xiàn)could not start the service mysql error:0問題的方法
這篇文章主要為大家詳細(xì)介紹了解決MySQL安裝重裝時(shí)出現(xiàn)could not start the service mysql error:0問題的方法,感興趣的小伙伴們可以參考一下2016-06-06
DB為何大量出現(xiàn)select @@session.tx_read_only 詳解
這篇文章主要給大家介紹了關(guān)于DB為何大量出現(xiàn)select @@session.tx_read_only 的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧。2018-04-04
MySQL安裝過程中在第四步initializing database出錯(cuò)的解決方法
安裝mysql時(shí),在第四步一直卡住了顯示失敗,文中通過圖文介紹的解決方法非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下,希望能幫助到大家2023-09-09
CentOs7安裝部署Sonar環(huán)境的詳細(xì)過程(JDK1.8+MySql5.7+sonarqube7.8)
這篇文章主要介紹了CentOs7安裝部署Sonar環(huán)境(JDK1.8+MySql5.7+sonarqube7.8),本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2023-06-06
mysql 如何插入隨機(jī)字符串?dāng)?shù)據(jù)的實(shí)現(xiàn)方法
這篇文章主要介紹了mysql 如何插入隨機(jī)字符串?dāng)?shù)據(jù)的實(shí)現(xiàn)方法,需要的朋友可以參考下2016-09-09
mysql批量插入BulkCopy的實(shí)現(xiàn)
本文主要介紹了mysql批量插入BulkCopy的實(shí)現(xiàn),文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2023-03-03

