分享MySQL生產(chǎn)庫(kù)內(nèi)存異常增高的排查過(guò)程
近期頻繁收到一個(gè)MySQL實(shí)例的內(nèi)存使用率高的報(bào)警,今天我們花時(shí)間排查一下問(wèn)題出在哪里。
修改performance_schema
因?yàn)楣旧a(chǎn)環(huán)境使用的阿里云RDS,修改參數(shù)相對(duì)方便,performance_schema默認(rèn)為0,此次修改為1。修改之后提交參數(shù),數(shù)據(jù)庫(kù)會(huì)進(jìn)行重啟,建議在業(yè)務(wù)低峰進(jìn)行。
打開內(nèi)存監(jiān)控
登錄MySQL數(shù)據(jù)庫(kù),執(zhí)行如下SQL,打開內(nèi)存監(jiān)控。
update performance_schema.setup_instruments set enabled = 'yes' where name like 'memory%';
打開之后驗(yàn)證一下。
select * from performance_schema.setup_instruments where name like 'memory%innodb%' limit 5;
**注意:**該命令是在線打開內(nèi)存統(tǒng)計(jì),所以只會(huì)統(tǒng)計(jì)打開后新增的內(nèi)存對(duì)象,打開前的內(nèi)存對(duì)象不會(huì)統(tǒng)計(jì),建議您打開后等待一段時(shí)間再執(zhí)行后續(xù)步驟,便于找出內(nèi)存使用高的線程。
查找內(nèi)存消耗
統(tǒng)計(jì)事件消耗內(nèi)存
select event_name, SUM_NUMBER_OF_BYTES_ALLOC from performance_schema.memory_summary_global_by_event_name order by SUM_NUMBER_OF_BYTES_ALLOC desc LIMIT 10; +---------------------------------------+-------------------------------------+ | event_name | SUM_NUMBER_OF_BYTES_ALLOC | +---------------------------------------+-------------------------------------+ | memory/sql/Filesort_buffer::sort_keys | 763523904056 | | memory/memory/HP_PTRS | 118017336096 | | memory/sql/thd::main_mem_root | 114026214600 | | memory/mysys/IO_CACHE | 59723548888 | | memory/sql/QUICK_RANGE_SELECT::alloc | 14381459680 | | memory/sql/test_quick_select | 12859304736 | | memory/innodb/mem0mem | 7607681148 | | memory/sql/String::value | 1405409537 | | memory/sql/TABLE | 1117918354 | | memory/innodb/btr0sea | 984013872 | +---------------------------------------+-------------------------------------+
可以看到內(nèi)存消耗最高的event是Filesort_buffer,根據(jù)經(jīng)驗(yàn),這個(gè)應(yīng)該是排序有關(guān)。
統(tǒng)計(jì)線程消耗內(nèi)存
select thread_id, event_name, SUM_NUMBER_OF_BYTES_ALLOC from performance_schema.memory_summary_by_thread_by_event_name order by SUM_NUMBER_OF_BYTES_ALLOC desc limit 10; +---------------------+---------------------------------------+-------------------------------------+ | thread_id | event_name | SUM_NUMBER_OF_BYTES_ALLOC | +---------------------+---------------------------------------+-------------------------------------+ | 105 | memory/memory/HP_PTRS | 69680198792 | | 183 | memory/sql/Filesort_buffer::sort_keys | 49210098808 | | 154 | memory/sql/Filesort_buffer::sort_keys | 43304339072 | | 217 | memory/sql/Filesort_buffer::sort_keys | 37752275360 | | 2773 | memory/sql/Filesort_buffer::sort_keys | 31460644712 | | 218 | memory/sql/Filesort_buffer::sort_keys | 31128994280 | | 2331 | memory/sql/Filesort_buffer::sort_keys | 28763981248 | | 106 | memory/memory/HP_PTRS | 27938197584 | | 191 | memory/sql/Filesort_buffer::sort_keys | 27701610224 | | 179 | memory/sql/Filesort_buffer::sort_keys | 25624723968 | +---------------------+---------------------------------------+-------------------------------------+
可以看到內(nèi)存消耗多的線程都跟Filesort_buffer
相關(guān)。
定位具體SQL
根據(jù)前邊我們查到的thread_id
去日志里查找對(duì)應(yīng)的SQL,阿里云RDS審計(jì)日志相對(duì)還是比較強(qiáng)大的。我們直接根據(jù)thread_id直接檢索。
我們?cè)谌罩纠锟吹酱罅窟@樣的SQL,掃描行數(shù)在幾千到幾萬(wàn)不等。雖然每次查詢時(shí)間并不長(zhǎng),大概在幾十到幾百毫秒,但是并發(fā)量很大。
跟開發(fā)同學(xué)核實(shí)之后,這個(gè)查詢沒(méi)有做分頁(yè),取到的數(shù)據(jù)有很多行,而且最后要做排序,并且排序字段并沒(méi)有合適的索引。到此,這次內(nèi)存使用率出現(xiàn)異常的罪魁禍?zhǔn)滓呀?jīng)找到。
到此這篇關(guān)于分享MySQL生產(chǎn)庫(kù)內(nèi)存異常增高的排查過(guò)程的文章就介紹到這了,更多相關(guān)MySQL生產(chǎn)庫(kù)內(nèi)存異常增高內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
教會(huì)你完全搞定MySQL數(shù)據(jù)庫(kù) 輕松八句話
只要掌握下面的方法,就基本上能搞定mysql數(shù)據(jù)庫(kù)。2010-09-09MySQL中Decimal類型和Float Double的區(qū)別(詳解)
下面小編就為大家?guī)?lái)一篇MySQL中Decimal類型和Float Double的區(qū)別(詳解)。小編覺(jué)得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2017-03-03mysql存儲(chǔ)過(guò)程?返回?list結(jié)果集方式
這篇文章主要介紹了mysql存儲(chǔ)過(guò)程?返回?list結(jié)果集方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2022-09-09mysql id從1開始自增 快速解決id不連續(xù)的問(wèn)題
這篇文章主要介紹了mysql id從1開始自增 快速解決id不連續(xù)的問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2021-07-07Sql Server數(shù)據(jù)庫(kù)遠(yuǎn)程連接訪問(wèn)設(shè)置詳情
這篇文章主要介紹了Sql Server數(shù)據(jù)庫(kù)遠(yuǎn)程連接訪問(wèn)設(shè)置詳情,文章圍繞主題展開詳細(xì)的內(nèi)容戒殺,具有一定的參考價(jià)值,需要的小伙伴可以參考一下2022-09-09