Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >JVM04-JVM内存泄露的场景以及排查

JVM04-JVM内存泄露的场景以及排查

作者头像
码农飞哥
发布于 2021-08-18 03:01:56
发布于 2021-08-18 03:01:56
47700
代码可运行
举报
文章被收录于专栏:好好学习好好学习
运行总次数:0
代码可运行

前言

这一篇介绍一下JVM中各种内存溢出及其处理方法。 本文会按照JVM中内存划分来介绍各种内存溢出的例子。

一些基本的设置说明

为了模拟出内存溢出的效果,我们需要手动设置内存区域的内存大小,下面就是设置值部分设置值及其说明。

分类

选项

说明

虚拟机栈

-Xss

每个线程的栈大小

堆空间

-Xms

启动JVM时的初始堆大小

堆空间

-Xmx

堆空间最大值

新生代空间

-XX:NewRatio

新生代与老年代的比例

新生代空间

-XX:NewSize

新生代大小

新生代空间

-XX:SurvivorRation

Eden区域SurvivorRation区的比例

永久代空间

-XX:PermSize

启动JVM时的初始永久代大小

永久代空间

-XX:MaxPermSize

永久代空间最大值

元空间

-XX:MetaspaceSize

指定元空间的初始空间大小,以字节为单位,达到该值就会触发垃圾收集进行类型卸载,同时收集器会对该值进行调整;如果释放了大量的空间,就适当降低该值;如果释放了很少的空间,那么在不超过 -XX:MaxMetaspaceSize 的情况下,适当提高该值。

元空间

-XX:MaxMetaspaceSize

设置元空间最大值,默认是-1,即不限制,或者说只受限于本地内存大小

元空间

-XX:MaxMetaspaceFreeRatio

在垃圾收集之后控制最小的元空间剩余容量的百分比,可减少因为元空间不足导致的垃圾收集的频率

堆内存溢出

Java堆用于存储对象的实例,我们只要不断地创建对象,并且保证GC Roots到对象之间有可达路径来避免垃圾回收机制清除这些对象,那么随着对象数量的增加,总容量触及最大堆的容量限制后就会产生内存溢出。Java堆内存的OutOfMemoryError异常是实际应用中最常见的内存溢出异常情况。出现Java堆内存溢出时,异常堆栈信息“java.lang.OutOfMemoryError”会跟随进一步提示“Java heap space”。下面举个例子来模拟堆内存溢出。这里将-Xms-Xmx都设置成20M,保证了Java堆内存不可扩展。然后,通过-XX:HeapDumpPath指定dump文件的保存位置。这里通过while循环不断的创建对象,然后保存到集合中。

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
/**
 * Java堆内存异常
 VM Args:
 //这两个参数保证了堆中的可分配内存固定为20M
 -Xms20m
 -Xmx20m

 -XX:+HeapDumpOnOutOfMemoryError //自动生成dump文件
 //文件生成的位置,作为生成在桌面的一个目录
 -XX:HeapDumpPath=D:\srv\dump
 *
 * @author xiang.wei
 * @date 2020/5/27 13:35
 */
public class HeapOOM {
    /**
     * 创建一个内部类用于创建对象使用
     */
    static class OOMObject {
    }

    public static void main(String[] args) {
        List<OOMObject> list = new ArrayList<>();
        //无限的创建对象放在堆中
        while (true) {
            list.add(new OOMObject());
        }
    }
}

下面简单的说一下在Idea中设置应用运行内存的方法,我们只需要在 Run---->Edit Configurations--->找到需要设置的主类,然后在VM options中添加

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
 -Xms20M -Xmx20M -Xmn20M   -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=D:\srv\dump

如下图所示:

在这里插入图片描述 上面程序运行结果如下:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
java.lang.OutOfMemoryError: Java heap space
Dumping heap to D:\srv\dump\java_pid23624.hprof ...
Heap dump file created [28062091 bytes in 0.143 secs]
Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
    at com.jay.service.HeapOOM.main(HeapOOM.java:31)
Java HotSpot(TM) 64-Bit Server VM warning: MaxNewSize (20480k) is equal to or greater than the entire heap (20480k).  A new max generation size of 19968k will be used.

我们可以看到程序生成了dump文件到指定目录,打开jvisualvm.exe工具导入heapDump文件,相应的说明如下图所示:

在这里插入图片描述 一共创建了802858个实例,消耗了 98.9%的运行内存。 切换到实例数如下图所示:

在这里插入图片描述 如何解决堆内存的OOM异常呢,首先需要确认内存中导致OOM的对象是否是必要的,也就是要先分清楚到底是出现了内存泄露(Memory Leak)还是内存溢出(Memory Overflow)。

Java栈内存异常

说完了Java堆内存异常,下面我们来看看Java栈内存异常,在实际开发中发生栈内存异常的情况比较少。Java栈内存异常发生的两种情况是:

  1. 如果线程请求的栈深度(栈深度:指目前虚拟机栈中没有出栈的方法帧)大于虚拟机所允许的最大深度,将抛出StackOverflowError异常。这种情况在递归的场景下可能会出现,如果在使用递归算法时没有控制好递归的跳出条件,就有可能会出现这种情况,下面的例子就是一个没有跳出条件的递归调用。根据前面说明,我们可以通过-Xss160k设置栈容量为160K。
  2. 如果虚拟机的栈内存允许动态扩展,当扩展容量无法申请到足够的内存时,将抛出OutOfMemoryError异常。 如下这个例子:
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
/**
 * VM Args:
 *    设置栈容量为160K,默认1M
 *    -Xss160k
 * @author xiang.wei
 * @date 2020/5/27 16:09
 */
public class JavaVMStackSOF {

    private int stackLength = 1;

    public void stackLeak() {
        stackLength++;
        System.out.println("*********栈的深度是:" + stackLength);
        //递归调用
        stackLeak();
    }

    public static void main(String[] args) throws Throwable {
        JavaVMStackSOF oom = new JavaVMStackSOF();
        try {
            oom.stackLeak();
        } catch (Exception e) {
            throw e;
        }
    }
}

运行结果如下:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
*********栈的深度是:1287
Exception in thread "main" java.lang.StackOverflowError
    at sun.nio.cs.UTF_8.updatePositions(UTF_8.java:77)

可以看到,递归调用了1287次,栈容量不够用了。 默认的栈容量在正常的方法调用时,栈深度可以达到1000-2000深度,所以,一般的递归可以承受的住,如果代码中出现了StackOverflowError,首先需要检查代码,看看是不是递归写的不对。不能只是调参数。 当创建很多线程时,容易出现OOM(OutOfMemoryError),这时可以通过具体情况,减少最大堆容量,或者栈容量来解决问题。 线程数*(最大栈容量)+最大堆值+其他内存(忽略不计或者一般不改动)=机器最大内存 当线程数比较多时,且无法通过业务上减少线程数,再不换机器的情况下,我们只能把最大栈容量设置小一点,或者把最大堆值设置小一点。

方法区和运行时常量池溢出

由于运行时常量池是方法区的一部分,所以这两个区域的溢出测试可以放在一起进行。需要注意的是HotSpot从JDK7开始逐步“去永久代”的计划,并在JDK8中完全使用元空间代替永久代,使用"永久代"还是"元空间"来实现方法区,对程序的影响是不同的。 元空间与永久代之间最大的区别在于:元空间并不在虚拟机中,而是使用本地内存,因此,默认情况下元空间的大小仅受本地内存限制,但仍可以通过参数控制: -XX:MetaspaceSize与-XX:MaxMetaspaceSize来控制大小。 方法区溢出也是一种常见的内存溢出异常,一个类如果要被垃圾收集器回收,要达成的条件是比较苛刻的。在经常运行时生成大量动态类的应用场景里,就应该特别关注这些类的回收状况,这类场景除了之前提到的程序使用了CGLib字节码增强和动态语言外,常见的还有:大量JSP或动态产生JSP文件的应用(JSP第一次运行时需要编译为Java类)、基于OSGI的应用(即使是同一个类文件,被不同的加载器加载也会被视为不同的类)。 方法区的主要职责是用于存放类型的相关信息,如类名、访问修饰符、常量池、字段描述、方法描述等。 对于这部分区域的测试,基本的思路是运行时产生大量的类去填满方法区,直到溢出为止。 这是因为在调用CGLib创建代理时会生成动态代理类,即Class对象到Metaspace,所以while一下就出异常了。 下面这个例子就是通过设置元空间大小,然后,通过动态代理生成大量的类,来模拟元空间内存溢出的情况。

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
/**
 * 在JDK8下测试方法区,所以设置了Metaspace的大小为固定的8M
 -XX:MetaspaceSize=8m
 -XX:MaxMetaspaceSize=8m
 * @author xiang.wei
 * @date 2020/5/27 17:29
 */
public class JavaMethodAreaOOM {
    public static void main(String[] args) {
        while (true) {
            Enhancer enhancer = new Enhancer();
            enhancer.setSuperclass(JOOMObject.class);
            enhancer.setUseCache(false);
            enhancer.setCallback((MethodInterceptor) (obj, method, objects, methodProxy) -> methodProxy.invokeSuper(obj,objects));
            //无限创建动态代理,生成class对象
            enhancer.create();
        }
    }
    static class JOOMObject{}

运行结果:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
Exception in thread "main" java.lang.OutOfMemoryError: Metaspace
    at org.springframework.cglib.core.ReflectUtils.defineClass(ReflectUtils.java:538)
    at org.springframework.cglib.core.AbstractClassGenerator.generate(AbstractClassGenerator.java:363)

总结

本文首先介绍了堆内存溢出(OutOfMemoryError)发生的场景以及处理方式,OutOfMemoryError发生的场景主要就是系统创建了大量的对象,并且这些对象是有效的(即保证GC Roots到对象之间有可达路径)。然后,介绍了栈内存异常(StackOverflowError)的发生场景以及处理方式,StackOverflowError发生的场景主要是线程调用栈深度超过了虚拟机运行的栈深度。最后,介绍了方法区的内存溢出。需要注意的是JDK1.8中完全移除了永久代,取而代之的是元空间。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2020-05-28,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 码农飞哥 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
作为网络工程师你都有哪些难忘的项目经验?
做了网络工程师快5年了,网络工程师究竟是做什么的?网络工程师发展前景如何呢?我在做网络期间经历了什么,有哪些比较难忘的经验呢?
网络工程师笔记
2022/05/24
1.3K0
作为网络工程师你都有哪些难忘的项目经验?
网络工程项目相关的23个文档,必要时刻很关键!
这两天,瑞哥给大家整理了一份特别好的资料,都是网络工程项目相关的文档、模板、方案,今天一口气全部分享出来。
网络技术联盟站
2023/03/01
8130
网络工程项目相关的23个文档,必要时刻很关键!
实施工程师——实施计划列表(不知道实施要干啥的过来看)
以上是实施工程师完整试试计划的主要步骤。在每个步骤中,实施工程师应该与客户密切合作,并与项目团队协作,确保项目成功完成。
红目香薰
2023/10/11
1.1K0
网络工程师职业指南
在一般人的概念中,认为能够拨号上上网,组装和维护计算机、组建局域网就是网络工程师了!其实网络工程师所具备的知识远不止这些,具备了上述技能只能算是个修电脑的。
SDNLAB
2020/03/19
9460
实施工程师——简历
以下4个比较高端的证书,例如PMP,很多地方有这个证就能混个比较不错的工作呢。但是不是终身的。
红目香薰
2023/10/11
1.5K0
Salesforce CPQ入门知识
每当你的客户向你询问报价的时候,他们其实是在询问潜在的购买信息,如他们将会用多少钱买到什么东西。我们可能会用打印的报价单,一个邮件或一个电话来提供给客户报价信息。对于报价这个词可能不同的人有不同的理解,让我们花些时间来看下报价在Salesforce CPQ的定义。
臭豆腐
2019/04/16
2.1K0
Salesforce CPQ入门知识
带你揭秘网络工程师群体!「建议收藏」
在一般人的概念里,网络工程师不过就是通过拨号上网,计算机组装与维护,组建局域网就以为是网络工程师了,其实网络工程师所具备的知识远远不止这些,那究竟真正的网络工程师是做什么?前途又如何?
全栈程序员站长
2022/11/16
3770
网络工程师领域,DeepSeek可以用于哪些方面,以提高工作效率和解决复杂问题呢?
随着网络技术的快速发展,网络工程师们面临的挑战也愈加复杂。从网络设计、部署到故障排除,网络工程师需要不断优化工作效率并解决不断出现的复杂问题。DeepSeek,作为一种先进的AI驱动的技术工具,正在逐渐成为网络工程师工作中的得力助手。那么,DeepSeek到底可以如何助力网络工程师,提升工作效率并解决复杂问题呢?
神的孩子都在歌唱
2025/03/05
2120
网络工程师领域,DeepSeek可以用于哪些方面,以提高工作效率和解决复杂问题呢?
Datacom ——数据通信网络基础(2)
• 按照地理覆盖范围来划分,网络可以分为局域网 (Local Area Network)、城域网
知孤云出岫
2023/12/13
2850
Datacom ——数据通信网络基础(2)
客户关系管理(CRM)
李才哥
2023/06/28
8410
开放共建,智能监控——itango网络质量监控系统
随着云业务发展,作为iaas层的网络变得越来越重要并且业务依赖性强,网络工程师将面临更多问题和困难,尤其是全链路网络问题排查(4G、固网、骨干网、IDC或是TCP/IP协议各层问题)。近年来国家提出“一带一路”倡议,鼓励企业出海,但由于海外运营商情况复杂,网络工程师与用户交互的效率成为亟待解决的问题。腾讯网络运营团队经过大量的实践和探索,建设并推出了itango轻量级网络质量监控平台,希望通过开放共建的方式,与业界同仁一起努力提升网络故障处理效率,让网络畅通无阻,为业务保驾护航。
鹅厂网事
2023/09/28
2.2K0
开放共建,智能监控——itango网络质量监控系统
新时代网络工程师的出路
随着云计算、大数据、物联网、人工智能等各领域迅速崛起,尤其是软件定义一切的理念渐渐植入新兴行业,大环境、新技术的冲击对于网络工程师而言是一个巨大的挑战。笔者之前也是网络工程师后面转到前端做售前工程师,所以当代环境下网络工程师所面临的问题也有了自己的一些理解。
ICT售前新说
2019/08/12
1.1K1
项目管理深入理解07--采购管理
采购这部分内容对于当前主要做技术的自己来说,比较陌生。回想2015在南京的日子,一个让我神牵梦绕的女孩的主要工作就涉及项目的招投标,合同谈判等事宜。因此更应该把这部分内容给好好掌握,她叫沈梦,希望女神
用户1216676
2018/01/24
9310
项目管理深入理解07--采购管理
这10个网络排障工具建议每位网络工程师都能熟练使用!
作为一名网络工程师,会有很长一段时间去解决网络中出现的问题或解决与 IT 和网络状况相关的问题。
网络技术联盟站
2023/03/01
2K0
这10个网络排障工具建议每位网络工程师都能熟练使用!
网络自动化和基于意图的网络(IBN)之入门篇
基于意图的网络(IBN)可以重新定义应用程序和服务在企业网络中的交付方式,但在此之前,这个概念必须先跟市场营销的宣传分离,并开始实现其承诺的优势。 从ARPANET到现在的计算机网络,网络管理员一直通
SDNLAB
2018/03/28
1.3K0
网络自动化和基于意图的网络(IBN)之入门篇
招聘|网络工程师大集结!
    在线业务及网络流量迅猛增长,这里有一波新鲜热辣的鹅厂招聘需求!     网络工程师们大显身手、大展宏图的机会来啦!期待你加入鹅厂的网络建设事业~ 01 系统运维工程师(深圳) 负责腾讯海量网络网管平台技术运营工作; 保障网管平台服务质量; 负责构建优化自动化运维工具平台,优化工作流程,提升工作效能; 02 网络系统运营工程师(深圳) 负责腾讯海量网络集中化控制系统运营工作; 负责构建相关自动化运维工具平台和监控体系,优化测试、部署、运营流程; 全面提升各种类型控制系统的安全性和可用性;
鹅厂网事
2020/04/13
8550
人人都是网络工程师
Hi 大家好,很高兴今天能有机会和大家进行这个分享。我是腾讯云负责IaaS网络产品策划的产品经理高航,今天和大家分享的主题是《人人都是网络工程师》。 网络是个很复杂的东西,经常晚上有美女家里上不
高航
2017/03/28
5.2K1
人人都是网络工程师
以项目为主线,泛微协助工程企业实现业务流程全过程数字化
工程企业项目多,需要同时对多个项目落实具体有效的管控,对项目过程、人财物等进行统筹管理,从而掌握对企业整体运营的管控,因此在项目流程执行、质量管控体系、数据收集统计等方面,需要更系统化、自动化。
泛微移动办公
2022/05/10
8270
以项目为主线,泛微协助工程企业实现业务流程全过程数字化
科普篇 | 网工为什么也要研究DeepSeek?
网络工程师在日常工作中,需要实时监控网络流量、设备状态和性能指标,及时发现并处理异常情况。然而,传统的监控手段往往依赖于人工观察和分析,不仅效率低下,还容易出现疏漏。而DeepSeek则能够通过机器学习和深度学习算法,自动分析实时网络数据,预测潜在问题,并提供快速解决方案。这不仅大大减轻了网工的工作负担,还提高了网络的稳定性和可靠性。例如,在某企业案例中,网络频繁出现延迟,DeepSeek通过分析流量模式,迅速定位到某台交换机负载过高的问题,工程师及时更换设备,避免了业务中断。
ICT系统集成阿祥
2025/02/07
2680
科普篇 | 网工为什么也要研究DeepSeek?
从SAP最佳业务实践看企业管理(25)-SD-功能概览
SAP SD(销售与分销),主要管理售中业务,是SAP五大核心模块(销售、物资、生产、财务) 之一,一般企业实施SAP,都要有SD模块,但也有特殊行业不使用这个模块,比如电网企业,售电业务不使用SD模块。 SD简单的说就是下销售订单给客户,然后通过PP和MM生产出成品后,再通过SD模块的Delivery进行发货(good Issue)最后,通过Bill进行Book Revenue收入记账(FICO模块)。 销售模块包含的主要业务,简单汇总如下: 销售报价 当客户需要一定数量的产品价格时
SAP最佳业务实践
2018/03/26
2.4K0
相关推荐
作为网络工程师你都有哪些难忘的项目经验?
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
本文部分代码块支持一键运行,欢迎体验
本文部分代码块支持一键运行,欢迎体验