Linux服務(wù)器Java進(jìn)程消失問題解決

更新時(shí)間：2019年11月27日 14:48:07 作者：myseries

這篇文章主要介紹了Linux服務(wù)器Java進(jìn)程消失問題解決,文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下

問題描述

在實(shí)際生產(chǎn)環(huán)境下，如果我們遇見Java進(jìn)程突然消失，該如何去排查問題？

思路

可能有幾種原因：

①、Java應(yīng)用程序的問題：發(fā)生OOM導(dǎo)致進(jìn)程Crash
最常見的是發(fā)生堆內(nèi)存異常“java.lang.OutOfMemoryError: Java heap space”，排查步驟如下：

Step1: 查看JVM參數(shù) -XX:+HeapDumpOnOutOfMemoryError 和 -XX:HeapDumpPath=*/java.hprof；
Step2: 根據(jù)HeapDumpPath指定的路徑查看是否產(chǎn)生dump文件；
Step3: 若存在dump文件，使用Jhat、VisualVM等工具分析即可；

②、JVM出錯(cuò)：JVM或JDK自身的Bug導(dǎo)致進(jìn)程Crash

當(dāng)JVM發(fā)生致命錯(cuò)誤導(dǎo)致崩潰時(shí)，會(huì)生成一個(gè)hs_err_pid_xxx.log這樣的文件，該文件包含了導(dǎo)致 JVM crash 的重要信息，我們可以通過分析該文件定位到導(dǎo)致 JVM Crash 的原因，從而修復(fù)保證系統(tǒng)穩(wěn)定。

默認(rèn)情況下，該文件是生成在工作目錄下的，當(dāng)然也可以通過 JVM 參數(shù)指定生成路徑：

-XX:ErrorFile=/var/log/hs_err_pid<pid>.log
這個(gè)文件的內(nèi)容他主要有如下內(nèi)容

日志頭文件
導(dǎo)致 crash 的線程信息
所有線程信息
安全點(diǎn)和鎖信息
堆信息
本地代碼緩存
編譯事件
gc 相關(guān)記錄
jvm 內(nèi)存映射
jvm 啟動(dòng)參數(shù)
服務(wù)器信息

拿到這個(gè)文件后，不用說了，慢慢啃吧。說到這里，我要摸著良心說。這個(gè)文件巨復(fù)雜，如果要會(huì)讀這個(gè)文件，請(qǐng)下點(diǎn)功夫。

③被操作系統(tǒng)OOM-Killer

Linux 內(nèi)核有個(gè)機(jī)制叫OOM killer（Out-Of-Memory killer），該機(jī)制會(huì)監(jiān)控那些占用內(nèi)存過大，尤其是瞬間很快消耗大量?jī)?nèi)存的進(jìn)程，為了防止內(nèi)存耗盡而內(nèi)核會(huì)把該進(jìn)程殺掉。

因此，你發(fā)現(xiàn)java進(jìn)程突然沒了，首先要懷疑是不是被linux的OOM killer給干掉了！

你可以去下面這個(gè)文件里翻

系統(tǒng)報(bào)錯(cuò)日志:/var/log/messages

你執(zhí)行命令

egrep -i 'killed process' /var/log/messages 
# egrep = grep -E 可以使用基本的正則表達(dá)外, 還可以用擴(kuò)展表達(dá)式， -i代表忽略大小寫 
#或者
grep “Out of memory” /var/log/messages

去日志里進(jìn)行查詢。

當(dāng)然，你也可以去內(nèi)核日志里頭查詢。有時(shí)Linux系統(tǒng)或者系統(tǒng)上運(yùn)行的java或者其它進(jìn)程，會(huì)發(fā)生一些莫名其妙的問題，比如突然掛掉了，比如突然重啟等等。在軟件上找不到問題所在，此時(shí)我們應(yīng)該懷疑硬件或者內(nèi)核的問題，此時(shí)我們就可以使用 dmesg來查看：

dmesg -T| grep java
#或者
dmesg -T | grep 'Out of memory'
# -T 是顯示時(shí)間戳

再對(duì)比java日志停止時(shí)間，看來這里才是問題的根源，所以接下來從優(yōu)化java內(nèi)存占用、加內(nèi)存入手嘗試解決問題吧！

備注：

dmesg命令是用來在Unix-like系統(tǒng)中顯示內(nèi)核的相關(guān)信息的。dmesg全稱是display message (or display driver)，即顯示信息。

實(shí)際上，dmesg命令是從內(nèi)核環(huán)形緩沖區(qū)中獲取數(shù)據(jù)的。當(dāng)我們?cè)贚inux上排除故障時(shí)，dmesg命令會(huì)十分方便，它能很好地幫我們鑒別硬件相關(guān)的error和warning。除此之外，dmesg命令還能打印出守護(hù)進(jìn)程相關(guān)的信息，已幫助我們debug。

您可能感興趣的文章: