ICode9

精准搜索请尝试: 精确搜索
首页 > 编程语言> 文章详细

Java进阶:JVM探究:全面解析OOM异常

2021-08-05 12:33:42  阅读:134  来源: 互联网

标签:Java 进阶 img OOM 虚拟机 对象 GC 内存


JVM探究:全面解析OOM异常,都在这了,看完再也不怕遇到了

通过配置VM参数限制Java堆的大小为20MB,不可扩展(将堆的最小值-Xms参数与最大值-Xmx参数设置为一样即可避免堆自动扩展),通过参数-XX:+HeapDumpOnOutOfMemoryError可以让虚拟机在出现内存溢出异常时Dump出当前的内存堆转储快照以便事后进行分析。

执行结果如下,Java堆内存的OOM异常是实际应用中常见的内存溢出异常情况。当出现Java堆内存溢出时,异常堆栈信息“java.lang.OutOfMemoryError”会跟着进一步提示“Java heap space”。

JVM探究:全面解析OOM异常,都在这了,看完再也不怕遇到了

要解决这个区域的异常,一般的手段是先通过内存映像分析工具(如Eclipse Memory Analyzer)对Dump出来的堆转储快照(在项目目录下)进行分析,重点是确认内存中的对象是否是必要的,也就是要先分清楚到底是出现了内存泄漏(Memory Leak)还是内存溢出(Memory Overflow)。

分析过程如下:

1. 通过mat打开快照文件,选择运行内存泄漏嫌疑报告

image.png

通过报告上面的饼图,可以清晰地看到一个可疑对象消耗了系统 96% 的内存。

在饼图的下方有对这个可疑对象的进一步描述。可以看到内存是由 java.lang.Object[]的数组实例消耗的,system class loader 负责这个对象的加载。通过描述可以了解到一些线索,比如是哪个类占用了绝大多数的内存,它属于哪个组件等等。

因此需要分析问题的原因,为什么一个 Object[]会占据了系统 99% 的内存?谁阻止了垃圾回收机制对它的回收?

回顾下 JAVA 的内存回收机制,内存空间中垃圾回收的工作由垃圾回收器 (Garbage Collector,GC) 完成的,它的核心思想是:对虚拟机可用内存空间,即堆空间中的对象进行识别,如果对象正在被引用,那么称其为存活对象,反之,如果对象不再被引用,则为垃圾对象,可以回收其占据的空间,用于再分配。

在垃圾回收机制中有一组元素被称为根元素集合,它们是一组被虚拟机直接引用的对象,比如,正在运行的线程对象,系统调用栈里面的对象以及被 system class loader 所加载的那些对象。堆空间中的每个对象都是由一个根元素为起点被层层调用的。因此,一个对象还被某一个存活的根元素所引用,就会被认为是存活对象,不能被回收,进行内存释放。因此,可以通过分析一个对象到根元素的引用路径来分析为什么该对象不能被顺利回收。如果说一个对象已经不被任何程序逻辑所需要但是还存在被根元素引用的情况,可以说这里存在内存泄露。
2. 具体分析

点击“Details ”链接,查看对可疑对象 的详细分析报告。

image.png

image.png

查看下从 GC 根元素到内存消耗聚集点的最短路径,在Shortest Paths To the Accumulation Point(GC root到聚集点的最短路径,就是持有可能泄漏内存对象的最近一层)的列表中,可以追溯到问题代码的类树的结构,并找到自己代码中的类。 在列表中,有两列Shallow Heap和Retained Heap。Shallow Heap指的是就是对象本身占用内存的大小,不包含对其他对象的引用,也就是对象头加成员变量(不是成员变量的值)的总和。Retained Heap指的是该对象自己的Shallow Heap,加上从该对象能直接或间接访问到对象的Shallow Heap之和。换句话说,Retained Heap是该对象被GC之后所能回收到内存的总和。

JVM探究:全面解析OOM异常,都在这了,看完再也不怕遇到了

可以很清楚的看到整个引用链,内存聚集点是一个拥有大量对象的集合。

接下来,再继续看看,这个对象集合里到底存放了什么,为什么会消耗掉如此多的内存。在Accumulated Objects in Dominator Tree列表中,可以查看创建的大量的对象的聚集详情,即完整的reference chain 。

image.png

在这张图上,我们可以清楚的看到,这个对象集合中保存了大量 OOMObject对象的引用,就是它导致的泄露。

如果确定为内存泄露,可进一步通过工具查看泄露对象到GC Roots的引用链。于是就能找到泄露对象是通过怎样的路径与GC Roots相关联并导致垃圾收集器无法自动回收它们的。掌握了泄露对象的类型信息及GC Roots引用链的信息,就可以比较准确地定位出泄露代码的位置。

如果不存在泄露,换句话说,就是内存中的对象确实都还必须存活着,那就应当检查虚拟机的堆参数(-Xmx与-Xms),与机器物理内存对比看是否还可以调大,从代码上检查是否存在某些对象生命周期过长、持有状态时间过长的情况,尝试减少程序运行期的内存消耗。

2. 虚拟机栈和本地方法栈溢出

由于在HotSpot虚拟机中并不区分虚拟机栈和本地方法栈,因此,对于HotSpot来说,虽然-Xoss参数(设置本地方法栈大小)存在,但实际上是无效的,栈容量只由-Xss参数设定。关于虚拟机栈和本地方法栈,在Java虚拟机规范中描述了两种异常:

  • 如果线程请求的栈深度大于虚拟机所允许的最大深度,将抛出StackOverflowError异常。
  • 如果虚拟机在扩展栈时无法申请到足够的内存空间,则抛出OutOfMemoryError异常。

这里把异常分成两种情况,看似更加严谨,但却存在着一些互相重叠的地方:当栈空间无法继续分配时,到底是内存太小,还是已使用的栈空间太大,其本质上只是对同一件事情的两种描述而已。

定义大量的本地变量,增大此方法帧中本地变量表的长度或者设置-Xss参数减少栈内存容量,这两种操作都会抛出StackOverflowError异常。

/**
 * 虚拟机栈SOF测试
 * <p>
 * -Xss128k */
public class JavaVMStackSOF {
    private int stackLength = 1;

    public void stackLeak(){
        stackLength++;
        stackLeak();
    }

    public static void main(String[] args) throws Throwable{
        JavaVMStackSOF oom = new JavaVMStackSOF();
        try {
            oom.stackLeak();
        }catch (Throwable e){
            System.out.println("stack length :"+oom.stackLength);
            throw e;
        }
    }

}

运行结果如下,抛出StackOverflowError异常时输出的堆栈深度相应缩小。

JVM探究:全面解析OOM异常,都在这了,看完再也不怕遇到了

所以,如果在单线程的情况下,无论是栈帧太大还是虚拟机栈容量太小,当内存无法再分配的时候,虚拟机抛出的是StackOverflowError异常。

如果在多线程下,不断地建立线程可能会产生OutOfMemoryError异常。

/**
 * 创建线程导致内存溢出异常 注意:windows平台下执行可能会导致系统卡死
 * -Xss2M
 */
public class JavaVMStackOOM {
    private void dontStop(){
         while(true){}
    }
    public void stackLeakByThread(){
        while(true){
            Thread thread = new Thread(new Runnable() {
                @Override
                public void run() {
                    dontStop();
                }
            });
            thread.start();
        }
    }

    public static void main(String[] args) {
        JavaVMStackOOM oom = new JavaVMStackOOM();
        oom.stackLeakByThread();
    }
}

运行结果如下:

JVM探究:全面解析OOM异常,都在这了,看完再也不怕遇到了

上面代码导致OOM的原因不难理解,操作系统分配给每个进程的内存是有限制的,譬如32位的Windows限制为2GB。虚拟机提供了参数来控制Java堆和方法区的这两部分内存的最大值。剩余的内存为2GB(操作系统限制)减去Xmx(最大堆容量),再减去MaxPermSize(最大方法区容量),程序计数器消耗内存很小,可以忽略掉。如果虚拟机进程本身耗费的内存不计算在内,剩下的内存就由虚拟机栈和本地方法栈“瓜分”了。每个线程分配到的栈容量越大,可以建立的线程数量自然就越少,建立线程时就越容易把剩下的内存耗尽;64位的Windows限制为8TB,理论上是可以创建很多线程的,但是,谁的机器内存有8TB??所以,在其他系统如Linux,创建多线程时,尽管未达到进程的内存限制,往往也会达到机器的最大内存,导致OOM。

在开发多线程的应用时特别注意,出现StackOverflowError异常时有错误堆栈可以阅读,相对来说,比较容易找到问题的所在。而且,如果使用虚拟机默认参数,栈深度在大多数情况下(因为每个方法压入栈的帧大小并不是一样的,所以只能说在大多数情况下)达到1000~2000完全没有问题,对于正常的方法调用(包括递归),这个深度应该完全够用了。但是,如果是建立过多线程导致的内存溢出,在不能减少线程数或者更换64位虚拟机的情况下,就只能通过减少最大堆和减少栈容量来换取更多的线程。

3. 方法区和运行时常量池溢出

String.intern()是一个Native方法,它的作用是:如果字符串常量池中已经包含一个等于此String对象的字符串,则返回代表池中这个字符串的String对象;否则,将此String对象包含的字符串添加到常量池中,并且返回此String对象的引用。

import java.util.ArrayList;
import java.util.List;

/**
 * 运行时常量池导致的内存溢出异常*/
public class RuntimeConstantPoolOOM {
    public static void main(String[] args) {
        //使用List保持常量池引用,避免Full GC回收常量池行为
        List<String> list = new ArrayList<String>();
        //10M的PermSize在integer范围内足够产生OOM
        int i = 0;
        while (true){
            list.add(String.valueOf(i++).intern());
        }
    }
}

在JDK 1.6及之前的版本中,由于常量池分配在永久代内,我们可以通过-XX:PermSize和-XX:MaxPermSize限制方法区(HotSpot虚拟机中的永久代)大小,从而间接限制其中常量池的容量。

JDK 1.6通过设置VM参数设置永久代大小 -XX:PermSize=10M -XX:MaxPermSize=10M,运行结果如下:

image.png

报错信息为永久代溢出,说明JDK1.6时运行时常量池在永久代。

JDK 1.7设置VM参数 -Xmx20m -Xms20m -XX:-UseGCOverheadLimit,这里的-XX:-UseGCOverheadLimit是关闭GC占用时间过长时会报的异常,然后限制堆的大小 -Xmx20m -Xms20m 。

JVM探究:全面解析OOM异常,都在这了,看完再也不怕遇到了

报错信息为堆内存溢出,原因是增加的常量都放到了堆中,所以限制堆内存以后,不断增加常量,导致堆内存溢出。说明JDK1.7时运行时常量池在堆中。

在JDK1.8中测试,设置VM参数 -Xmx20m -Xms20m -XX:-UseGCOverheadLimit,结果和JDK1.7相同。

补充一点:如果在上面的JDK 1.7或者JDK1.8中不通过VM参数 -XX:-UseGCOverheadLimit关闭GC占用时间过长时报的异常,即只设置VM参数 -Xmx20m -Xms20m ,执行结果如下:

image.png

并行/并发回收器在GC回收时间过长时会抛出OutOfMemroyError。过长的定义是,超过98%的时间用来做GC并且回收了不到2%的堆内存。用来避免内存过小造成应用不能正常工作。

由此可证明,在JDK1.2 ~ JDK6的实现中,HotSpot使用永久代实现方法区,从JDK7开始Oracle HotSpot开始移除永久代,JDK7中符号表被移动到Native Heap中,字符串常量和类引用被移动到Java Heap中。在JDK8中,字符串常量依然在堆中,“永久代”完全被元空间(Meatspace)所取代。

JVM探究:全面解析OOM异常,都在这了,看完再也不怕遇到了

运行如下一段代码测试String.intern()的返回引用

public class InternMethodTest {
    public static void main(String[] args) {


# **Java高频面试专题合集解析:**

![阿里Java岗面试百题:Spring 缓存 JVM 微服务 数据库 RabbitMQ等](https://www.icode9.com/i/ll/?i=img_convert/622f5c57cda58627218db5aab7059d42.png)

当然在这还有更多整理总结的Java进阶学习笔记和面试题未展示,在这也是免费分享给那些有需要的朋友,其中囊括了**Dubbo、Redis、Netty、zookeeper、Spring cloud、分布式、高并发等架构资料和完整的Java架构学习进阶导图!**

**这些资料都以整理成了PDF文档,如果有需要可以[狂戳这里免费下载](https://gitee.com/vip204888/java-p7)即可!**


![阿里Java岗面试百题:Spring 缓存 JVM 微服务 数据库 RabbitMQ等](https://www.icode9.com/i/ll/?i=img_convert/00b17269e8c4a31507b4ef7b54e2f2f7.png)

**更多Java架构进阶资料展示**

![阿里Java岗面试百题:Spring 缓存 JVM 微服务 数据库 RabbitMQ等](https://www.icode9.com/i/ll/?i=img_convert/17e3b6d9ebdf53818f7a22417ea27391.png)

![阿里Java岗面试百题:Spring 缓存 JVM 微服务 数据库 RabbitMQ等](https://www.icode9.com/i/ll/?i=img_convert/b475b62fd215abeb349563996312e253.png)

狂戳这里免费下载](https://gitee.com/vip204888/java-p7)即可!**


[外链图片转存中...(img-R8wRZ0u6-1628136952215)]

**更多Java架构进阶资料展示**

[外链图片转存中...(img-QE9APdnh-1628136952215)]

[外链图片转存中...(img-w5sfCt9E-1628136952216)]

![阿里Java岗面试百题:Spring 缓存 JVM 微服务 数据库 RabbitMQ等](https://www.icode9.com/i/ll/?i=img_convert/19acd31c6a08f52c746af8e16641d2de.png)

标签:Java,进阶,img,OOM,虚拟机,对象,GC,内存
来源: https://blog.csdn.net/m0_56255097/article/details/119415132

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有