JVM内存溢出OOM

JVM中各个区域内存都是有限的,在内存不足的情况下,继续分配新的内存空间,而不对老的内存空间进行回收释放,测试就会产生内存溢出,即大名鼎鼎的OOM(Out Of Memory).

1. 产生OOM的区域


在JVM的五大区域(堆、Java虚拟机栈、本地方法栈、Metaspace、程序计数器)中,独有程序计数器不会发生OOM,其他区域都会产生OOM,这是由于程序计数器中存储的数据所占空间的大小不会随程序的执行而发生改变。所以,会导致OOM产生的区域是:

  • 堆,存放新创建的对象
  • Java虚拟机栈,存放栈帧、方法局部变量。
  • 本地方法栈
  • Metaspace, 主要用来存放类的字节码信息

2. 解决OOM的思路

首先,需要确认一点的是配置没有剑走偏锋,不存在某个区域给的内存太小,正常情况下就容易产生OOM。这点很容易做到,先看下服务器的JVM配置,然后再和推荐的配置进行比较。
服务器上的JVM配置,可以通过jinfo -flags 进程号来查看,具体可以参考:JVM参数简介
。而推荐的配置可以通过PerfMa社区提供的XXFox产品来获取,XXFox有个根据机器配置一键生成JVM参数的功能,示意图如下:

如果JVM的内存配置看起来是合理的,那我们就需要定位到底是哪个对象生成太多导致了OOM。而想要知道哪个对象太多,我们就要获取发生OOM时的内存快照文件(即dump文件),只需要在JVM的启动参数中加入以下参数:

-XX:+HeapDumpOnOutOfMemoryError
-XX:HeapDumpPath=/usr/local/oom

-XX:+HeapDumpOnOutOfMemoryError表示在发生OOM的时候自动将内存快照dump出来, -XX:HeapDumpPath=/usr/local/oom参数指定dump文件存储的路径。

有了内存快照之后,我们就可以通过MAT之类的工具进行分析。关于MAT的使用可以参考:JVM堆内存分析工具-MAT

3. Java虚拟机栈的OOM


每个线程运行时,都会创建对应的虚拟机栈,线程中运行一个方法会创建一个栈帧,并将该栈帧入栈,方法执行结束则栈帧出栈。
一个线程的虚拟机栈内存大小一般设置成1M, 假如程序不停的创建栈帧并入栈(即发生方法调用),那么就有可能出现内存溢出的情况。一般而言,当发生递归调用,容易产生虚拟机栈的OOM。 以下程序模拟产生虚拟机栈的OOM

/**
 * vm args:
 *    -XX:ThreadStackSize=1m
 * @author zhangguicong
 * @date 2019-12-23
 */
public class StackOomSample {

    private static long counter = 0 ;

    public static void main(String[] args) {
        call();
    }

    private static void call () {
        counter++;
        System.out.println("第"+counter+"次调用call方法");
        call();
    }

}

解决办法

对线程的栈内存和栈帧来说,它们是不存在GC,所以没发通过查看GC日志来定位此类问题。另外,内存快照对此也无法提供帮助。
一般而言,只要把所有的异常都写入本地日志文件中,那么当系统发生问题时我们直接去看日志文件中的异常信息就可以。栈内存溢出的报错日志是:

Exception in thread "main" java.lang.StackOverflowError

4. Metaspace的OOM


Metaspace即JDK1.8之前常说的方法区,JVM运行过程中会不停地往这个区域加载类。当Metaspace区域快要满了,会触发一次Full GC, 而在每次Full GC的时候也会尝试回收Metaspace区域。Metaspace中class对象想要被回收,需要满足以下条件:

  1. 所有由该class创建出来的对象都已经被回收;
  2. class对象没有引用执行;
  3. 这个类的类加载器要先被回收。

因为有了以上条件的限制,所有class对象一般很难被回收掉。

Metaspace一般极少发生OOM,如果真的发生了,请考虑以下两种诱因。

  • Metaspace内存空间设置很小。一般不进行配置的话,默认只有几十M,对于大型项目,可能要加载的类很多,所以可能会不够,一般而言,可以设置成512M;
  • 系统中使用动态类加载技术(如,cglib)不当,导致动态生产的类过多。以下代码模拟产生Metaspace的OOM
import net.sf.cglib.proxy.Enhancer;
import net.sf.cglib.proxy.MethodInterceptor;
import net.sf.cglib.proxy.MethodProxy;
import java.lang.reflect.Method;

/**
 * VM args:
 *    -XX:+UseParNewGC -XX:+UseConcMarkSweepGC -XX:MetaspaceSize=10m -XX:MaxMetaspaceSize=10m  -XX:+PrintGCDetails -Xloggc:gc.log  -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=./
 * @author zhangguicong
 * @date 2019-12-23
 */
public class MetaspaceOomSample {

    public static void main(String[] args) {
        dynamicCreateClass();
    }

    public static void dynamicCreateClass () {
        while(true) {
            Enhancer enhancer = new Enhancer();
            enhancer.setSuperclass(Dog.class);
            enhancer.setUseCache(false);
            enhancer.setCallback(new MethodInterceptor() {
                @Override
                public Object intercept(Object o, Method method, Object[] objects, MethodProxy methodProxy) throws Throwable {
                    if (method.getName().equals("eat")) {
                        System.out.println("play with dog before dog eat.");
                    }
                    return methodProxy.invokeSuper(o,objects);
                }
            });

            Dog dog = ((Dog) enhancer.create());
            dog.eat();
        }
    }

    static class Dog {
        public void eat () {
            System.out.println("dog is eating bone");
        }
    }
}

5. 堆的OOM


对于虚拟机栈和Metaspace区域来说,一般只要代码上注意一些,不太容易引发这两块区域的OOM。日常开发中,更常见的是堆内存中的OOM。

我们知道在堆内存中,对象首先存放在新生代中,发生YoungGC之后可能进入老年代,老年内存不足时再发生Full GC,但如果Full GC之后,发现对象依然需要存活,无法将其内存释放掉,此时老年代无法再放入新的对象,JVM只能选择内存溢出。

发生堆内存溢出的场景:

  1. 高并发,系统承载请求量过大,导致大量对象都是存活的,无法放入新的对象;
  2. 系统存在内存泄漏的问题,莫名其妙弄了很多的对象,没有及时取消对他们的引用,结果对象都是存活的,导致触发GC无法回收。

以下代码模拟产生堆的OOM

/**
 * vm args:
 *    -Xms10m -Xmx10m -XX:+PrintGCDetails -Xloggc:gc.log -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=./ -XX:+UseParNewGC -XX:+UseConcMarkSweepGC
 * @author zhangguicong
 * @date 2019-12-23
 */
public class HeapOomSample {

    public static void main(String[] args) {
        List<Person> personList = new ArrayList<>();
        while (true) {
            personList.add(new Person("zs",23));
        }
    }

    static class Person {
        private String name;
        private Integer age;

        public Person(String name, Integer age) {
            this.name = name;
            this.age = age;
        }
    }
}

MAT分析dump文件

我们运行上面的示例代码,不一会生成dump文件,使用MAT打开这个dump文件,可以看到如下图所示:

点击Leak Suspects,MAT给我们推测出来发生OOM的原因只有一个:

我们看高亮部分的英文提示:main线程通过局部变量引用了96.98%的对象,且都被java.lang.Object[]的一个实例对象引用着。此时我们并不能知道Object[]中是什么东西,需要点击 Details 》,点击之后,我们可以看到:

到这里,我们可以知道OOM产生的原因是堆内存中产生了大量的Person对象导致的。

此外我们还可以点击“See stacktrace”查看线程的执行栈情况,定位到可能发生OOM的代码所在位置:

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,126评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,254评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,445评论 0 341
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,185评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,178评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,970评论 1 284
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,276评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,927评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,400评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,883评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,997评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,646评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,213评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,204评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,423评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,423评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,722评论 2 345

推荐阅读更多精彩内容