记一次Java进程突然消失问题-低调大师

记一次Java进程突然消失问题

2018-10-24 703

记一次Java进程突然消失问题

@Date 2017.05.22

现象: 线上同一个应用部署了多台服务器,有的机器运行过程中突然告警,发现服务进程消失.

看程序本身的日志,没有异常输出
查询磁盘空间是否不足,没有此问题
增加如下启动参数,查看GC日志,发现程序无GC出现

   -Xloggc:/home/admin/logs/gc.log 
   -XX:+PrintGCDetails 
   -XX:+PrintGCDateStamps 
   -XX:+HeapDumpOnOutOfMemoryError 
   -XX:HeapDumpPath=/home/admin/logs/java.hprof

在上述重启服务时,发现一个现象,程序重启没有多久就消失掉. 此时使用dmesg
查看Linux系统日志, dmesg只能查看到最近的系统缓存日志,所以在现场能还原时查看最合适.

重点:

会发现dmesg的日志中出现oom kill的字样,由此可以判断应该是机器内存被占满,系统自动选择一个占用内存最大的进行kill掉
复现确认
1. 在启动应用之后,使用free命令查看机器内存占用情况, 发现total和used相差无几
2. 查看JVM启动参数以及机器内存配置,发现-Xmx配置和机器内存相等,由此可以断定是应用启动堆内存沾满机器内存,造成系统KILL

解决: 修改JVM启动参数,最好改成系统内存大小的1/2或者2/3左右即可

总结: 需要区分heap与 non-heap,堆内存不足会有OOM异常,进程无缘无故消失一般就是堆外内存导致

注意: 引起系统OOM-KILL的其他情况还有比如使用VIM编辑大文件, 如果文件过大也会造成撑满机器内存

微信关注我们

原文链接：https://yq.aliyun.com/articles/657791

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Java程序员面试没带笔记本电脑，直接手写代码 HR：现在可以入职吗？

生活在这个忙碌的社会，我们总是在忙碌中丢三落四。我们会从家出门忘带钥匙，我们会上班路上想起忘带工牌，到公司想起昨天晚上在家加班的资料没拿，甚至上班时起身去打杯水，途中看了下手机回来忘记拿水杯。最尴尬是也许就在于，去面试吃饭的家伙没带了！这是一个真实而感人的故事，程序员去公司面试，走到流程需要程序员打一段需求代码。程序员，习惯性回首一掏，这一次他没有掏出笔记本来。HR摇了摇头，内心已经否认了这个程序员：对于程序员来说，电脑是吃饭的家伙，可是他居然不带！ HR却并没有声张，坐在那里静静的看着程序员。显然是想看他出丑。程序员，拿出简历，翻至空白处，拿起了HR记录的笔，开始了一段书写。面试时程序员丝毫不显慌张，自信心爆棚的他，没有提笔忘字的感觉。但写出一段代码并非易事。但HR看出程序员手写代码特别厉害！随便一动笔就是行云流水，一泻千里。写完丢下笔，把纸递过去。HR激动地东北口音暴露出来大喊：老铁，66666 程序员也是一笑，看是妥了。后来HR把程序员送出公司才知道当年电脑还没有普及，如果想编程，行得通的就是跑网吧去，可上网费贵啊，只能买个笔记本，提起水笔，把代码写好，然后在到网吧里去输...

2018-10-25

565

JVM堆外内存分析 @Date 2017.07.20 事件回顾在对应用进行压测的时候,观察物理内存占用以及JVM堆中对象情况,发现物理内存占用很大,堆中对象却很少.怀疑是堆外内存占用问题. 工具介绍(gperftools) 下载工具libunwind-1.0.tar.gz和gperftools-2.5.tar.gz并进行编译安装(具体可以查找教程) 在安装之后并配置好gperf路径在JVM启动应用之前,执行以下命令 export LD_PRELOAD=/usr/local/lib/libtcmalloc.so export HEAPPROFILE=/home/admin/logs/pro 会在HEAPPROFILE指定的目录中生成.heap文件使用以下命令可以查看堆外内存文件的构成(支持导出gif或者pdf) pprof --text /opt/taobao/install/ajdk-8.2.3-b46/bin/java pro_149025.0001.heap pprof --pdf /opt/taobao/install/ajdk-8.2.3-b46/bin/java pro...

2018-10-25

761

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。