jvm crash 最近公司服務器上面出現了這樣的情況,java進程突然自己關閉。服務器使用的java容器是tomcat。查看tomcat日誌catalina.out顯示的錯誤報告爲:
# A fatal error has been detected by the Java Runtime Environment:
出現的頻率還很高基本是一個小時關閉一次。在沒解決問題之前先用一個腳本頂着:
#!/bin/bash
i=`netstat -tlnp |grep java | wc -l`
if [ $i -eq 0 ];then
service tomcat start
sleep 10
if [ $? -eq 0 ];then
echo "tomcat restart `date +%Y-%m-%d_%H:%M`" >>/root/retomcat.log #日誌文件需要手動創建
else
echo "error restart tomcat `date +%Y-%m-%d_%H:%M`" >>/root/retomcat.log
fi
else
echo "tomcat is ok"
fi
然後加入定時任務每分鐘檢查一次java進程個數是否爲0.如果爲0就啓動tomcat服務。
因爲這問題花了一段時間才解決,所以在處理的過程中就使用這個腳本頂着保證java服務開啓。
然後開始查資料了
參考資料:
http://www.oschina.net/question/1092_24066 這個很詳細
通過以上的描述最後確定了問題是由於jvm優化代碼所引起的jvm的bug。網上出現這個問題的都是jdk1.6版本的 我安裝的Jdk-1.7也有這樣的問題,很奇怪。我其他服務器都是正常的就只有這臺出現了問題。
每次java進程報錯的時候都會在根目錄下生成一個錯誤文件如hs_err_pid16367.log,查看這個文件、
vi /hs_err_pid16367.log 會發現一些有用的信息
如:
--------------- T H R E A D ---------------
Current thread (0x00007f9db0182800): JavaThread "C2 CompilerThread1" daemon [_thread_in_native, id=6012, stack(0x00007f9da9897000,0
x00007f9da9998000)]
Current CompileTask:
C2:8485207 1925 xiao.hao123.gameserver.astj.androidrpg.fight.bean.log.FightNormalRoundLogBean::toString (2593 bytes) # 這段代碼告訴了JAVA進程報錯的時候執行的代碼,這行就是出差的原因
通過觀察hs_err_pid16367.log文件知道了引起錯誤代碼的位置之後開始編輯/bin/catalina.sh文件
在啓動項目中添加如下代碼:
JAVA_OPTS="-Xms2048m -Xmx2048m -Xmn512m -XX:PermSize=256M -XX:MaxPermSize=256m -Xss256k -XX:-ReduceInitialCardMarks -XX:CompileCommand=exclude,me/gall/gameserver/astj/androidrpg/fight/bean/log/FightNormalRoundLogBean,toString -Djava.awt.headless=true
-XX:CompileCommand=exclude=exclude,xiao/hao123/gameserver/astj/androidrpg/fight/bean/log/FightNormalRoundLogBean,toString #這行就是我們添加的代碼 意思是JVM不需要優化這段代碼,記住這裏的JAVA方法名稱不能照抄 需要根據自己的錯誤日誌來填寫
-XX:CompileCommand=exclude,這個是固定的
xiao/hao123/gameserver/astj/androidrpg/fight/bean/log/FightNormalRoundLogBean,toString 這個是根據錯誤日誌來填寫的 把錯誤日誌的.換成/ 就可以 toString這個是方法名稱
經過上面的調試之後 觀察了一天,在沒有報錯了。基本確定就是這個問題。以上是解決java進程自動關閉的過程供大家參考!