btrace定位生產(chǎn)故障的方法示例
前言
很多時(shí)候我們需要知道更多的程序的運(yùn)行細(xì)節(jié),但又不可能在開發(fā)的時(shí)候就把程序中所有的運(yùn)行細(xì)節(jié)都打印到日志上,通常這個(gè)時(shí)候能采取的就是修改代碼,重新部署,然后再觀察,但這種方法對于online應(yīng)用來說不是很好,另外一方面如果碰到不好改的代碼,例如引用的其他的外部的包什么的,就很麻煩了,BTrace就是一個(gè)可以在不改代碼、不重啟應(yīng)用的情況下,動態(tài)的查看程序運(yùn)行細(xì)節(jié)的工具,下面這篇文章就介紹了btrace定位生產(chǎn)故障的方法,需要的朋友們可以參考借鑒。
現(xiàn)象
某些請求通過數(shù)據(jù)訪問層很慢并導(dǎo)致處理線程阻塞,從監(jiān)控中未能檢查到異常。
編寫btrace腳本
@BTrace public class DBProxyTrace { @OnMethod(clazz = "xxx.xxx.QueryHandler", method = "query", location = @Location(Kind.RETURN)) public static void trace2(String sql, @Duration long duration) { if (duration/1000000 > 10 * 1000) { com.sun.btrace.BTraceUtils.println(duration/1000000 + "ms"); com.sun.btrace.BTraceUtils.println("this task executes more than 10s. the sql is : " + sql); com.sun.btrace.BTraceUtils.println("jstack is : "); com.sun.btrace.BTraceUtils.jstack(); } } }
判斷執(zhí)行大于10秒的sql和堆棧信息。
編譯腳本DBProxyTrace.Java,確認(rèn)腳本沒有問題。
./bin/btracec -cp build/ java/DBProxyTrace.java
執(zhí)行腳本DBProxyTrace.class
./bin/btrace -cp build/ 17342 DBProxyTrace.class
信息
10468ms this task executes more than 10s. the sql is : rollback jstack is : xxx.QueryHandler.query(QueryHandler.java:106) xxx.net.AbstractConnection.onReadData(AbstractConnection.java:245) xxx.net.NIOReactor$RW.run(NIOReactor.java:77) java.lang.Thread.run(Thread.java:745)
定位
阻塞在事務(wù)回滾。
使用jstack進(jìn)一步定位。
打印JVM堆棧
"$_NIOREACTOR-7-RW" prio=10 tid=0x00007f069856f000 nid=0xde1 waiting for monitor entry [0x00007f0677011000] java.lang.Thread.State: BLOCKED (on object monitor) at Oracle.jdbc.driver.PhysicalConnection.rollback(PhysicalConnection.java:1167) - waiting to lock <0x000000068086fbc0> (a oracle.jdbc.driver.T4CConnection)
結(jié)論
阻塞在了oracle驅(qū)動rollback動作,這里其實(shí)是因?yàn)閛racle驅(qū)動為了保證串行請求響應(yīng)而在底層加了鎖,而這個(gè)通道被慢語句塞住了,所以rollback塞了。
總結(jié)
以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學(xué)習(xí)或者工作能帶來一定的幫助,如果有疑問大家可以留言交流。
相關(guān)文章
SpringBoot整合MyBatis Plus實(shí)現(xiàn)基本CRUD與高級功能
Spring Boot是一款用于快速構(gòu)建Spring應(yīng)用程序的框架,而MyBatis Plus是MyBatis的增強(qiáng)工具,本文將詳細(xì)介紹如何在Spring Boot項(xiàng)目中整合MyBatis Plus,并展示其基本CRUD功能以及高級功能的實(shí)現(xiàn)方式,需要的朋友可以參考下2024-02-02Spring boot從安裝到交互功能實(shí)現(xiàn)零基礎(chǔ)全程詳解
這篇文章主要介紹了Spring boot從安裝到交互功能得實(shí)現(xiàn)全程詳解,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2022-07-07springboot2.3 整合mybatis-plus 高級功能(圖文詳解)
這篇文章主要介紹了springboot2.3 整合mybatis-plus 高級功能,本文通過圖文并茂的形式給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2020-08-08詳解Java中l(wèi)ist,set,map的遍歷與增強(qiáng)for循環(huán)
這篇文章主要介紹了詳解Java中l(wèi)ist,set,map的遍歷與增強(qiáng)for循環(huán)的相關(guān)資料,需要的朋友可以參考下2017-02-02Java紅黑樹的數(shù)據(jù)結(jié)構(gòu)與算法解析
紅黑樹問題是各大計(jì)算機(jī)考研命題以及面試算法題目中的熱門,接下來我們?yōu)榇蠹覉D解紅黑樹的數(shù)據(jù)結(jié)構(gòu)與算法解析,需要的朋友可以參考下2021-08-08Java 動態(tài)代理你真的懂了嗎(動態(tài)和代理)
動態(tài)代理分兩部分,動態(tài)和代理,今天通過本文給大家普及代碼模式及動態(tài)代理的概念及示例代碼,感興趣的朋友跟隨小編一起看看吧2021-07-07