浅谈内存泄露
正文
定义
首先,我们要先谈一下定义,因为一堆人搞不懂内存溢出和内存泄露的区别。
内存溢出(OutOfMemory):你只有十块钱,我却找你要了一百块。对不起啊,我没有这么多钱。(给不起)
内存泄露(MemoryLeak):你有十块钱,我找你要一块。但是无耻的博主,不把钱还你了。(没退还)
关系:多次的内存泄露,会导致内存溢出。(博主不要脸的找你多要几次钱,你就没钱了,就是这个道理。)
危害
ok,大家在项目中有没遇到过java程序越来越卡的情况。
因为内存泄露,会导致频繁的Full GC,而Full GC 又会造成程序停顿,最后Crash了。因此,你会感觉到你的程序越来越卡,越来越卡,然后你就被产品经理鄙视了。顺便提一下,我们之所以JVM调优,就是为了减少Full GC的出现。
我记得,我曾经有一次,就遇到项目刚上线的时候好好的。结果随着时间的堆积,报了OutOfMemoryError: PermGen space。
说到这个PermGen space,突然间,一阵洪荒之力,从博主体内喷涌而出,一定要介绍一下这个方法区,不过点到为止,毕竟这不是在讲《jvm从入门到放弃》。
方法区:出自java虚拟机规范, 可供各条线程共享的运行时内存区域。它存储了每一个类的结构信息,例如运行时常量池(Runtime Constant Pool)、字段和方法数据、构造函数和普通方法的字节码内容。
上面讲的是规范,在不同虚拟机里头实现是不一样的,最典型的就是永久代(PermGen space)和元空间(Metaspace)。
jdk1.8以前:实现方法区的叫永久代。因为在很久远以前,java觉得类几乎是静态的,并且很少被卸载和回收,所以给了一个永久代的雅称。因此,如果你在项目中,发现堆和永久代一直在不断增长,没有下降趋势,回收的速度根本赶不上增长的速度,不用说了,这种情况基本可以确定是内存泄露。
jdk1.8以后:实现方法区的叫元空间。Java觉得对永久代进行调优是很困难的。永久代中的元数据可能会随着每一次Full GC发生而进行移动。并且为永久代设置空间大小也是很难确定的。因此,java决定将类的元数据分配在本地内存中,元空间的最大可分配空间就是系统可用内存空间。这样,我们就避开了设置永久代大小的问题。但是,这种情况下,一旦发生内存泄露,会占用你的大量本地内存。如果你发现,你的项目中本地内存占用率异常高。嗯,这就是内存泄露了。
如何排查
(1)通过jps查找java进程id。
(2)通过top -p [pid]发现内存占用达到了最大值
(3)jstat -gccause pid 20000 每隔20秒输出Full GC结果
(4)发现Full GC次数太多,基本就是内存泄露了。生成dump文件,借助工具分析是哪个对象太多了。基本能定位到问题在哪。
实例
在stackoverflow上,有一个问题,如下所示
大致就是,因为面试需要手写一段内存泄露的程序,然后提问的人突然懵逼了,于是很多大佬纷纷给出回答。
案例一
此例子出自《算法》(第四版)一书,我简化了一下
当数据从栈里面弹出来之后,data数组还一直保留着指向元素的指针。那么就算你把栈pop空了,这些元素占的内存也不会被回收的。
解决方案就是
案例二
这个其实是一堆例子,这些例子造成内存泄露的原因都是类似的,就是不关闭流,具体的,可以是文件流,socket流,数据库连接流,等等
具体如下,没关文件流
再比如,没关闭连接
解决方案就是。。。嗯,大家应该都会。。你敢说你不会调close()方法。
案例三
讲这个例子前,大家对ThreadLocal在Tomcat中引起内存泄露有了解么。不过,我要说一下,这个泄露问题,和ThreadLocal本身关系不大,我看了一下官网给的例子,基本都是属于使用不当引起的。
在Tomcat的官网上,记录了这个问题。地址是:https://wiki.apache.org/tomcat/MemoryLeakProtection
不过,官网的这个例子,可能不好理解,我们略作改动。
public classHelloServletextendsHttpServlet{
private static final long serialVersionUID = 1L;
static classLocalVariable{
private Long[] a = new Long[1024 * 1024 * 100];
}
final static ThreadLocal localVariable = new ThreadLocal();
@Override
publicvoiddoGet(HttpServletRequest request, HttpServletResponse response)throwsIOException, ServletException{
localVariable.set(new LocalVariable());
}
}
再来看下conf下sever.xml配置
maxThreads="150"minSpareThreads="4"/>
线程池最大线程为150个,最小线程为4个
Tomcat中Connector组件负责接受并处理请求,每来一个请求,就会去线程池中取一个线程。
在访问该servlet时,ThreadLocal变量里面被添加了new LocalVariable()实例,但是没有被remove,这样该变量就随着线程回到了线程池中。另外多次访问该servlet可能用的不是工作线程池里面的同一个线程,这会导致工作线程池里面多个线程都会存在内存泄露。
另外,servlet的doGet方法里面创建new LocalVariable()的时候使用的是webappclassloader。
那么
LocalVariable对象没有释放 -> LocalVariable.class没有释放 -> webappclassloader没有释放 -> webappclassloader加载的所有类也没有被释放,也造成了内存泄露。
除此之外,你在eclipse中,做一个reload操作,工作线程池里面的线程还是一直存在的,并且线程里面的threadLocal变量并没有被清理。而reload的时候,又会新构建一个webappclassloader,重复上述步骤。多reload几次,就内存溢出。
不过Tomcat7.0以后,你每做一次reload,会清理工作线程池中线程的threadLocals变量。因此,这个问题在tomcat7.0后,不会存在。
ps:ThreadLocal的使用在Tomcat的服务环境下要注意,并非每次web请求时候程序运行的ThreadLocal都是唯一的。ThreadLocal的什么生命周期不等于一次Request的生命周期。ThreadLocal与线程对象紧密绑定的,由于Tomcat使用了线程池,线程是可能存在复用情况。
欢迎工作一到五年的Java工程师朋友们加入Java架构开发:860113481
群内提供免费的Java架构学习资料(里面有高可用、高并发、高性能及分布式、Jvm性能调优、Spring源码,MyBatis,Netty,Redis,Kafka,Mysql,Zookeeper,Tomcat,Docker,Dubbo,Nginx等多个知识点的架构资料)合理利用自己每一分每一秒的时间来学习提升自己,不要再用"没有时间“来掩饰自己思想上的懒惰!趁年轻,使劲拼,给未来的自己一个交代!
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
六步安装scrapy
scrapy在Windows下安装会很麻烦,要安装许多依赖库,本文为你介绍一下怎么安装,scrapy.分为六步 1、安装 wheel 首先要确保你的python配置到环境变量里,否则你的python和pip都无法使用。 然后需要安装几个依赖库 pip install wheel 安装好这个库之后,你就可以安装一些wheel文件,因为有一些库用pip安装起来比较麻烦,这个时候就要用到wheel,你可以通过安装wheel文件,来安装一些库。 2、安装lxml 打开下载wheel文件的网址 https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml 下载对应python版本的lxml wheel文件,下载之后记住路径, pip install + 下载lxml wheel文件的路径 3、安装PyOpenssl 打开网址 https://pypi.python.org/pypi/PyOpenSSL#downloads 下载wheel文件 pip install + 下载文件路径 4、安装Twisted 打开网址 https://www.lfd.uci.ed...
- 下一篇
带你入门Python爬虫,8个常用爬虫技巧盘点
python作为一门高级编程语言,它的定位是优雅、明确和简单。 我学用python差不多一年时间了, 用得最多的还是各类爬虫脚本, 写过抓代理本机验证的脚本、写过论坛中自动登录自动发贴的脚本 写过自动收邮件的脚本、写过简单的验证码识别的脚本。 这些脚本有一个共性,都是和web相关的, 总要用到获取链接的一些方法,故累积了不少爬虫抓站的经验, 在此总结一下,那么以后做东西也就不用重复劳动了。 如果你在学习Python的过程中遇见了很多疑问和难题,可以加-q-u-n227 -435-450里面有软件视频资料免费领取 1、基本抓取网页 get方法 post方法 2.使用代理服务器 这在某些情况下比较有用, 比如IP被封了,或者比如IP访问的次数受到限制等等。 3.Cookies处理 是的没错,如果想同时用代理和cookie, 那就加入proxy_support然后operner改为 ,如下: 4.伪装成浏览器访问 某些网站反感爬虫的到访,于是对爬虫一律拒绝请求。 这时候我们需要伪装成浏览器, 这可以通过修改http包中的header来实现: 5、页面解析 对于页面解析最强大的当然是正则表达式...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- SpringBoot2整合Redis,开启缓存,提高访问速度
- CentOS6,CentOS7官方镜像安装Oracle11G
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- Red5直播服务器,属于Java语言的直播服务器
- Eclipse初始化配置,告别卡顿、闪退、编译时间过长
- 2048小游戏-低调大师作品