一文詳解MYSQL最樸素的監(jiān)控方式
本次文章完全使用mysql自帶的show命令實現(xiàn)獲取,從connects、buffercache、lock、SQL、statement、Database throughputs、serverconfig7大方面全面獲取監(jiān)控數(shù)據(jù)。
1 連接數(shù)(Connects)
- 最大使用連接數(shù):show status like ‘Max_used_connections’
- 當前打開的連接數(shù):show status like ‘Threads_connected’
2 緩存(bufferCache)
- 未從緩沖池讀取的次數(shù):show status like ‘Innodb_buffer_pool_reads’
- 從緩沖池讀取的次數(shù):show status like ‘Innodb_buffer_pool_read_requests’
- 緩沖池的總頁數(shù):show status like ‘Innodb_buffer_pool_pages_total’
- 緩沖池空閑的頁數(shù):show status like ‘Innodb_buffer_pool_pages_free’
- 緩存命中率計算:(1-Innodb_buffer_pool_reads/Innodb_buffer_pool_read_requests)*100%
- 緩存池使用率為:((Innodb_buffer_pool_pages_total-Innodb_buffer_pool_pages_free)/Innodb_buffer_pool_pages_total)*100%
3 鎖(lock)
- 鎖等待個數(shù):show status like ‘Innodb_row_lock_waits’
- 平均每次鎖等待時間:show status like ‘Innodb_row_lock_time_avg’
- 查看是否存在表鎖:show open TABLES where in_use>0;有數(shù)據(jù)代表存在鎖表,空為無表鎖
備注:鎖等待統(tǒng)計得數(shù)量為累加數(shù)據(jù),每次獲取得時候可以跟之前得數(shù)據(jù)進行相減,得到當前統(tǒng)計得數(shù)據(jù)
4 SQL
- 查看mysql開關(guān)是否打開:show variables like ‘slow_query_log’,ON為開啟狀態(tài),如果為OFF,set global slow_query_log=1 進行開啟
- 查看mysql閾值:show variables like ‘long_query_time’,根據(jù)頁面?zhèn)鬟f閾值參數(shù),修改閾值 set global long_query_time=0.1
- 查看mysql慢sql目錄:show variables like ‘slow_query_log_file’
- 格式化慢sql日志:mysqldumpslow -s at -t 10 /export/data/mysql/log/slow.log
注:此語句通過jdbc執(zhí)行不了,屬于命令行執(zhí)行。意思為:顯示出耗時最長的10個SQL語句執(zhí)行信息,10可以修改為TOP個數(shù)。顯示的信息為:執(zhí)行次數(shù)、平均執(zhí)行時間、SQL語句
備注:當mysqldumpslow命令執(zhí)行失敗時,將慢日志同步到本地進行格式化處理。
5 statement
- insert數(shù)量:show status like ‘Com_insert’
- delete數(shù)量:show status like ‘Com_delete’
- update數(shù)量:show status like ‘Com_update’
- select數(shù)量:show status like ‘Com_select’
6 吞吐(Database throughputs)
- 發(fā)送吞吐量:show status like ‘Bytes_sent’
- 接收吞吐量:show status like ‘Bytes_received’
- 總吞吐量:Bytes_sent+Bytes_received
7 數(shù)據(jù)庫參數(shù)(serverconfig)
show variables
8 慢SQL
慢SQL指的是MySQL慢查詢,具體指運行時間超過long_query_time值的SQL。
我們常聽MySQL中有二進制日志binlog、中繼日志relaylog、重做回滾日志redolog、undolog等。針對慢查詢,還有一種慢查詢?nèi)罩緎lowlog,用來記錄在MySQL中響應(yīng)時間超過閥值的語句。慢SQL對實際生產(chǎn)業(yè)務(wù)影響是致命的,所以測試人員在性能測試過程中,對數(shù)據(jù)庫SQL語句執(zhí)行情況實施監(jiān)控,給開發(fā)提供準確的性能優(yōu)化意見顯得尤為重要。那怎么使用Mysql數(shù)據(jù)庫提供的慢查詢?nèi)罩緛肀O(jiān)控SQL語句執(zhí)行情況,找到消耗較高的SQL語句,以下詳細說明一下慢查詢?nèi)罩镜氖褂貌襟E:
- 確保打開慢SQL開關(guān)slow_query_log
- 設(shè)置慢SQL域值long_query_time
這個long_query_time是用來定義慢于多少秒的才算“慢查詢”,注意單位是秒,我通過執(zhí)行sql指令set long_query_time=1來設(shè)置了long_query_time的值為1, 也就是執(zhí)行時間超過1秒的都算慢查詢,如下:
- 查看慢SQL日志路徑
- 通過慢sql分析工具mysqldumpslow格式化分析慢SQL日志
mysqldumpslow慢查詢分析工具,是mysql安裝后自帶的,可以通過./mysqldumpslow —help查看使用參數(shù)說明
常見用法:
- 取出使用最多的10條慢查詢
./mysqldumpslow -s c -t 10 /export/data/mysql/log/slow.log - 取出查詢時間最慢的3條慢查詢
./mysqldumpslow -s t -t 3 /export/data/mysql/log/slow.log
注意: 使用mysqldumpslow的分析結(jié)果不會顯示具體完整的sql語句,只會顯示sql的組成結(jié)構(gòu);
假如: SELECT FROM sms_send WHERE service_id=10 GROUP BY content LIMIT 0, 1000;
mysqldumpslow命令執(zhí)行后顯示:
Count: 2 Time=1.5s (3s) Lock=0.00s (0s) Rows=1000.0 (2000), vgos_dba[vgos_dba]@[10.130.229.196]SELECT FROM sms_send WHERE service_id=N GROUP BY content LIMIT N, N
mysqldumpslow的分析結(jié)果詳解:
- Count:表示該類型的語句執(zhí)行次數(shù),上圖中表示select語句執(zhí)行了2次。
- Time:表示該類型的語句執(zhí)行的平均時間(總計時間)
- Lock:鎖時間0s。
- Rows:單次返回的結(jié)果數(shù)是1000條記錄,2次總共返回2000條記錄。
通過這個工具就可以查詢出來哪些sql語句是慢SQL,從而反饋研發(fā)進行優(yōu)化,比如加索引,該應(yīng)用的實現(xiàn)方式等。
常見慢SQL排查
- 不使用子查詢
SELECT *FROM t1 WHERE id (SELECT id FROM t2 WHERE name=’hechunyang’);
子查詢在MySQL5.5版本里,內(nèi)部執(zhí)行計劃器是這樣執(zhí)行的:先查外表再匹配內(nèi)表,而不是先查內(nèi)表t2,當外表的數(shù)據(jù)很大時,查詢速度會非常慢。在MariaDB10/MySQL5.6版本里,采用join關(guān)聯(lián)方式對其進行了優(yōu)化,這條SQL會自動轉(zhuǎn)換為 SELECT t1. * FROM t1 JOIN t2 ON t1.id = t2.id;
但請注意的是:優(yōu)化只針對SELECT有效,對UPDATE/DELETE子 查詢無效, 生產(chǎn)環(huán)境盡量應(yīng)避免使用子查詢。 - 避免函數(shù)索引
SELECT FROM t WHERE YEAR(d) >= 2016;
由于MySQL不像Oracle那樣?持函數(shù)索引,即使d字段有索引,也會直接全表掃描。應(yīng)改為 > SELECT FROM t WHERE d >= ‘2016-01-01’; - 用IN來替換OR低效查詢
慢SELECT FROM t WHERE LOC_ID = 10 OR LOC_ID = 20 OR LOC_ID = 30;
高效查詢 > SELECT FROM t WHERE LOC_IN IN (10,20,30); - LIKE雙百分號無法使用到索引
SELECT FROM t WHERE name LIKE ‘%de%’;
使用SELECT FROM t WHERE name LIKE ‘de%’; - 分組統(tǒng)計可以禁止排序
SELECT goods_id,count( *) FROM t GROUP BY goods_id;
默認情況下,MySQL對所有GROUP BY col1,col2…的字段進?排序。如果查詢包括GROUP BY,想要避免排序結(jié)果的消耗,則可以指定ORDER BY NULL禁止排序。使用SELECT goods_id,count( *) FROM t GROUP BY goods_id ORDER BY NULL; - 禁止不必要的ORDER BY排序
SELECT count(1) FROM user u LEFT JOIN user_info i ON u.id = i.user_id WHERE 1 = 1 ORDER BY u.create_time DESC;使用SELECT count(1) FROM user u LEFT JOIN user_info i ON u.id = i.user_id;
9 總結(jié)
任何東西不應(yīng)過重關(guān)注其外表,要注重內(nèi)在的東西,往往絢麗的外表下會有對應(yīng)的負擔和損耗。
mysql數(shù)據(jù)庫的監(jiān)控支持通過SQL方式從performance_schema庫中訪問對應(yīng)的表數(shù)據(jù),前提是初始化此庫并開啟監(jiān)控數(shù)據(jù)寫入。
對于監(jiān)控而言,不在于手段的多樣性,而需要明白監(jiān)控的本質(zhì),以及需要的監(jiān)控項內(nèi)容,找到符合自身項目特色的監(jiān)控方式。
在選擇監(jiān)控工具對mysql監(jiān)控時,需要關(guān)注監(jiān)控工具本身對于數(shù)據(jù)庫服務(wù)器的消耗,不要影響到其自身的使用。
以上就是一文詳解MYSQL最樸素的監(jiān)控方式的詳細內(nèi)容,更多關(guān)于MYSQL 監(jiān)控方式的資料請關(guān)注腳本之家其它相關(guān)文章!
相關(guān)文章
刪庫跑路?使用xtraback備份MySQL數(shù)據(jù)庫的方法
mysqldump備份方式是采用邏輯備份,最大的缺陷就是備份和恢復的速度都慢,這時候就需要一種很好用又高效的工具,xtraback 就是其中的一款,號稱免費版的innodb hotbackup。接下來通過本文給大介紹使用xtraback備份MySQL數(shù)據(jù)庫的方法,感興趣的朋友一起看看吧2018-10-10mysql err錯誤提示You need to use --log-
今天在檢查mysql服務(wù)器錯誤日志的時候發(fā)現(xiàn)You need to use --log-bin to make --binlog-format work,通過如下方法解決了特分享一下2023-06-06