记一次Java进程突然消失问题-低调大师

记一次Java进程突然消失问题

2018-10-24 719

记一次Java进程突然消失问题

@Date 2017.05.22

现象: 线上同一个应用部署了多台服务器,有的机器运行过程中突然告警,发现服务进程消失.

看程序本身的日志,没有异常输出
查询磁盘空间是否不足,没有此问题
增加如下启动参数,查看GC日志,发现程序无GC出现

   -Xloggc:/home/admin/logs/gc.log 
   -XX:+PrintGCDetails 
   -XX:+PrintGCDateStamps 
   -XX:+HeapDumpOnOutOfMemoryError 
   -XX:HeapDumpPath=/home/admin/logs/java.hprof

在上述重启服务时,发现一个现象,程序重启没有多久就消失掉. 此时使用dmesg
查看Linux系统日志, dmesg只能查看到最近的系统缓存日志,所以在现场能还原时查看最合适.

重点:

会发现dmesg的日志中出现oom kill的字样,由此可以判断应该是机器内存被占满,系统自动选择一个占用内存最大的进行kill掉
复现确认
1. 在启动应用之后,使用free命令查看机器内存占用情况, 发现total和used相差无几
2. 查看JVM启动参数以及机器内存配置,发现-Xmx配置和机器内存相等,由此可以断定是应用启动堆内存沾满机器内存,造成系统KILL

解决: 修改JVM启动参数,最好改成系统内存大小的1/2或者2/3左右即可

总结: 需要区分heap与 non-heap,堆内存不足会有OOM异常,进程无缘无故消失一般就是堆外内存导致

注意: 引起系统OOM-KILL的其他情况还有比如使用VIM编辑大文件, 如果文件过大也会造成撑满机器内存

微信关注我们

原文链接：https://yq.aliyun.com/articles/657791

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Java程序员面试没带笔记本电脑，直接手写代码 HR：现在可以入职吗？

生活在这个忙碌的社会，我们总是在忙碌中丢三落四。我们会从家出门忘带钥匙，我们会上班路上想起忘带工牌，到公司想起昨天晚上在家加班的资料没拿，甚至上班时起身去打杯水，途中看了下手机回来忘记拿水杯。最尴尬是也许就在于，去面试吃饭的家伙没带了！这是一个真实而感人的故事，程序员去公司面试，走到流程需要程序员打一段需求代码。程序员，习惯性回首一掏，这一次他没有掏出笔记本来。HR摇了摇头，内心已经否认了这个程序员：对于程序员来说，电脑是吃饭的家伙，可是他居然不带！ HR却并没有声张，坐在那里静静的看着程序员。显然是想看他出丑。程序员，拿出简历，翻至空白处，拿起了HR记录的笔，开始了一段书写。面试时程序员丝毫不显慌张，自信心爆棚的他，没有提笔忘字的感觉。但写出一段代码并非易事。但HR看出程序员手写代码特别厉害！随便一动笔就是行云流水，一泻千里。写完丢下笔，把纸递过去。HR激动地东北口音暴露出来大喊：老铁，66666 程序员也是一笑，看是妥了。后来HR把程序员送出公司才知道当年电脑还没有普及，如果想编程，行得通的就是跑网吧去，可上网费贵啊，只能买个笔记本，提起水笔，把代码写好，然后在到网吧里去输...

2018-10-25

581

JVM堆外内存分析 @Date 2017.07.20 事件回顾在对应用进行压测的时候,观察物理内存占用以及JVM堆中对象情况,发现物理内存占用很大,堆中对象却很少.怀疑是堆外内存占用问题. 工具介绍(gperftools) 下载工具libunwind-1.0.tar.gz和gperftools-2.5.tar.gz并进行编译安装(具体可以查找教程) 在安装之后并配置好gperf路径在JVM启动应用之前,执行以下命令 export LD_PRELOAD=/usr/local/lib/libtcmalloc.so export HEAPPROFILE=/home/admin/logs/pro 会在HEAPPROFILE指定的目录中生成.heap文件使用以下命令可以查看堆外内存文件的构成(支持导出gif或者pdf) pprof --text /opt/taobao/install/ajdk-8.2.3-b46/bin/java pro_149025.0001.heap pprof --pdf /opt/taobao/install/ajdk-8.2.3-b46/bin/java pro...

2018-10-25

778

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。