jvm crash 最近公司服务器上面出现了这样的情况,java进程突然自己关闭。服务器使用的java容器是tomcat。查看tomcat日志catalina.out显示的错误报告为:
# A fatal error has been detected by the Java Runtime Environment:
#
# SIGSEGV (0xb) at pc=0x00007f14d28eeeef, pid=16367, tid=139727180842752
#
# JRE version: 7.0_25-b30
# Java VM: OpenJDK 64-Bit Server VM (23.7-b01 mixed mode linux-amd64 compressed oops)
# Problematic frame:
# V [libjvm.so+0x640eef] PhaseIdealLoop::clone_loop(IdealLoopTree*, Node_List&, int, Node*)+0xd7f
#
# Failed to write core dump. Core dumps have been disabled. To enable core dumping, try "ulimit -c unlimited" before starting Java a
gain
#
# An error report file with more information is saved as:
# //hs_err_pid16367.log
#
# If you would like to submit a bug report, please include
# instructions on how to reproduce the bug and visit:
# https://bugs.launchpad.net/ubuntu/+source/openjdk-7/
出现的频率还很高基本是一个小时关闭一次。在没解决问题之前先用一个脚本顶着:
#!/bin/bash
i=`netstat -tlnp |grep java | wc -l`
if [ $i -eq 0 ];then
service tomcat start
sleep 10
if [ $? -eq 0 ];then
echo "tomcat restart `date +%Y-%m-%d_%H:%M`" >>/root/retomcat.log #日志文件需要手动创建
else
echo "error restart tomcat `date +%Y-%m-%d_%H:%M`" >>/root/retomcat.log
fi
else
echo "tomcat is ok"
fi
然后加入定时任务每分钟检查一次java进程个数是否为0.如果为0就启动tomcat服务。
因为这问题花了一段时间才解决,所以在处理的过程中就使用这个脚本顶着保证java服务开启。
然后开始查资料了
参考资料:
http://sind.iteye.com/blog/1132459
http://eric-flower.iteye.com/blog/1447080
http://www.oschina.net/question/1092_24066 这个很详细
通过以上的描述最后确定了问题是由于jvm优化代码所引起的jvm的bug。网上出现这个问题的都是jdk1.6版本的 我安装的Jdk-1.7也有这样的问题,很奇怪。我其他服务器都是正常的就只有这台出现了问题。
每次java进程报错的时候都会在根目录下生成一个错误文件如hs_err_pid16367.log,查看这个文件、
vi /hs_err_pid16367.log 会发现一些有用的信息
如:
--------------- T H R E A D ---------------
Current thread (0x00007f9db0182800): JavaThread "C2 CompilerThread1" daemon [_thread_in_native, id=6012, stack(0x00007f9da9897000,0
x00007f9da9998000)]
Current CompileTask:
C2:8485207 1925 xiao.hao123.gameserver.astj.androidrpg.fight.bean.log.FightNormalRoundLogBean::toString (2593 bytes) # 这段代码告诉了JAVA进程报错的时候执行的代码,这行就是出差的原因
通过观察hs_err_pid16367.log文件知道了引起错误代码的位置之后开始编辑/bin/catalina.sh文件
在启动项目中添加如下代码:
JAVA_OPTS="-Xms2048m -Xmx2048m -Xmn512m -XX:PermSize=256M -XX:MaxPermSize=256m -Xss256k -XX:-ReduceInitialCardMarks -XX:CompileCommand=exclude,me/gall/gameserver/astj/androidrpg/fight/bean/log/FightNormalRoundLogBean,toString -Djava.awt.headless=true
-XX:CompileCommand=exclude=exclude,xiao/hao123/gameserver/astj/androidrpg/fight/bean/log/FightNormalRoundLogBean,toString #这行就是我们添加的代码 意思是JVM不需要优化这段代码,记住这里的JAVA方法名称不能照抄 需要根据自己的错误日志来填写
-XX:CompileCommand=exclude,这个是固定的
xiao/hao123/gameserver/astj/androidrpg/fight/bean/log/FightNormalRoundLogBean,toString 这个是根据错误日志来填写的 把错误日志的.换成/ 就可以 toString这个是方法名称
经过上面的调试之后 观察了一天,在没有报错了。基本确定就是这个问题。以上是解决java进程自动关闭的过程供大家参考!
运维网声明
1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网 享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com