JVMを探検 - OOM異常

Java仮想マシン仕様の説明では、プログラム・カウンタに加えて、仮想マシンのいくつかの他のランタイムメモリ領域のOutOfMemoryErrorを有する起こり得る異常(以下、OOMと称します)。このセクションでは、主にメモリ構造のjdk1.8の探査に基づいています。

1. Javaヒープオーバーフロー

 Javaヒープ・オブジェクト・インスタンスを格納するために使用されるメモリを生成する限り、オブジェクトを作成し、GC根間到達経路がこれらのオブジェクトを削除するためにガベージコレクション機構を回避することを目的とすることを保証するために続けて、その後、容量がヒープ内のオブジェクトの最大数を制限達しますオーバーフロー例外。

輸入はjava.util.ArrayList;
輸入はjava.util.List;

/ **
 * Javaのヒープメモリオーバーフロー例外テスト
 * <P>
 * -Xms20m -Xmx20m -XX:HeapDumpOnOutOfMemoryError
 * / 
パブリック クラスHeapOOM {
     静的 クラスOOMObject {

    }

    パブリック 静的 ボイドメイン(文字列[]引数){
        一覧 <OOMObject>リスト= 新しいのArrayList <OOMObject> ();
        一方、){
            list.add(新しいOOMObject());
        }
    }

}

Java VMのヒープサイズパラメータを設定することにより制限パラメータによって、(同じスタックに設定ヒープ-Xms最小値と最大パラメータ-Xmxパラメータが自動的に拡張することによって回避することができる)に拡張することができない、20メガバイトである-XX:+ HeapDumpOnOutOfMemoryError仮想でき後で解析するために、現在のメモリヒープダンプのスナップショット・オーバーフロー例外が発生した場合に、マシンのメモリダンプ。

実行結果は、以下のように、JavaヒープメモリOOM例外は、共通メモリオーバーフロー例外の実用化されています。ときのJavaの出現は、ヒープメモリオーバーフローの例外スタック情報「java.lang.OutOfMemoryErrorを」さらにプロンプ​​ト「Javaヒープスペース」に従います。

ダンプの一般的な手段(例えば、Eclipseのメモリアナライザのような)メモリイメージ分析ツールによって分析(プロジェクトディレクトリ内の)ヒープダンプスナップショットのうちの最初のものである。この異常領域を解決するために、焦点は、メモリ内のオブジェクトが必要であるかどうかを確認することです、最終的に区別することが最初であるメモリリーク(メモリリーク)またはメモリ・オーバーフロー(メモリオーバーフロー)です。 

次のように分析プロセスは次のとおりです。

マットでスナップショットファイルを開きます、疑いのレポートメモリリークを実行することを選択します

上記円グラフの報告書の採択は、あなたが不審なオブジェクトがシステムメモリの96%を消費はっきり見ることができます。

不審物のさらなる説明以下円グラフです。我々は、メモリがjava.lang.Objectの[]配列インスタンスによって消費さ見ることができ、システム・クラス・ローダは、オブジェクトをロードする責任があります。いくつかの手がかりは、クラスがメモリのほとんどを取っているかなどの説明から学ぶことができ、それはとても上のどのコンポーネントおよび所属します。

そこで我々は、Object []は、システムメモリの99%を占めるだろう、なぜ、問題の原因を分析する必要がありますか?誰がその回復にガベージコレクションを防ぎますか?

回顾下 JAVA 的内存回收机制,内存空间中垃圾回收的工作由垃圾回收器 (Garbage Collector,GC) 完成的,它的核心思想是:对虚拟机可用内存空间,即堆空间中的对象进行识别,如果对象正在被引用,那么称其为存活对象,反之,如果对象不再被引用,则为垃圾对象,可以回收其占据的空间,用于再分配。

在垃圾回收机制中有一组元素被称为根元素集合,它们是一组被虚拟机直接引用的对象,比如,正在运行的线程对象,系统调用栈里面的对象以及被 system class loader 所加载的那些对象。堆空间中的每个对象都是由一个根元素为起点被层层调用的。因此,一个对象还被某一个存活的根元素所引用,就会被认为是存活对象,不能被回收,进行内存释放。因此,可以通过分析一个对象到根元素的引用路径来分析为什么该对象不能被顺利回收。如果说一个对象已经不被任何程序逻辑所需要但是还存在被根元素引用的情况,可以说这里存在内存泄露。
2. 具体分析

点击“Details ”链接,查看对可疑对象 的详细分析报告。

查看下从 GC 根元素到内存消耗聚集点的最短路径,在Shortest Paths To the Accumulation Point(GC root到聚集点的最短路径,就是持有可能泄漏内存对象的最近一层)的列表中,可以追溯到问题代码的类树的结构,并找到自己代码中的类。 在列表中,有两列Shallow Heap和Retained Heap。Shallow Heap指的是就是对象本身占用内存的大小,不包含对其他对象的引用,也就是对象头加成员变量(不是成员变量的值)的总和。Retained Heap指的是该对象自己的Shallow Heap,加上从该对象能直接或间接访问到对象的Shallow Heap之和。换句话说,Retained Heap是该对象被GC之后所能回收到内存的总和。

 

可以很清楚的看到整个引用链,内存聚集点是一个拥有大量对象的集合。

接下来,再继续看看,这个对象集合里到底存放了什么,为什么会消耗掉如此多的内存。在Accumulated Objects in Dominator Tree列表中,可以查看创建的大量的对象的聚集详情,即完整的reference chain 。

在这张图上,我们可以清楚的看到,这个对象集合中保存了大量 OOMObject对象的引用,就是它导致的泄露。

如果确定为内存泄露,可进一步通过工具查看泄露对象到GC Roots的引用链。于是就能找到泄露对象是通过怎样的路径与GC Roots相关联并导致垃圾收集器无法自动回收它们的。掌握了泄露对象的类型信息及GC Roots引用链的信息,就可以比较准确地定位出泄露代码的位置。

如果不存在泄露,换句话说,就是内存中的对象确实都还必须存活着,那就应当检查虚拟机的堆参数(-Xmx与-Xms),与机器物理内存对比看是否还可以调大,从代码上检查是否存在某些对象生命周期过长、持有状态时间过长的情况,尝试减少程序运行期的内存消耗。

2. 虚拟机栈和本地方法栈溢出

由于在HotSpot虚拟机中并不区分虚拟机栈和本地方法栈,因此,对于HotSpot来说,虽然-Xoss参数(设置本地方法栈大小)存在,但实际上是无效的,栈容量只由-Xss参数设定。关于虚拟机栈和本地方法栈,在Java虚拟机规范中描述了两种异常:

  • 如果线程请求的栈深度大于虚拟机所允许的最大深度,将抛出StackOverflowError异常。
  • 如果虚拟机在扩展栈时无法申请到足够的内存空间,则抛出OutOfMemoryError异常。

这里把异常分成两种情况,看似更加严谨,但却存在着一些互相重叠的地方:当栈空间无法继续分配时,到底是内存太小,还是已使用的栈空间太大,其本质上只是对同一件事情的两种描述而已。

定义大量的本地变量,增大此方法帧中本地变量表的长度或者设置-Xss参数减少栈内存容量,这两种操作都会抛出StackOverflowError异常。

/**
 * 虚拟机栈SOF测试
 * <p>
 * -Xss128k */
public class JavaVMStackSOF {
    private int stackLength = 1;

    public void stackLeak(){
        stackLength++;
        stackLeak();
    }

    public static void main(String[] args) throws Throwable{
        JavaVMStackSOF oom = new JavaVMStackSOF();
        try {
            oom.stackLeak();
        }catch (Throwable e){
            System.out.println("stack length :"+oom.stackLength);
            throw e;
        }
    }

}

运行结果如下,抛出StackOverflowError异常时输出的堆栈深度相应缩小。

所以,如果在单线程的情况下,无论是栈帧太大还是虚拟机栈容量太小,当内存无法再分配的时候,虚拟机抛出的是StackOverflowError异常。

如果在多线程下,不断地建立线程可能会产生OutOfMemoryError异常。

/**
 * 创建线程导致内存溢出异常 注意:windows平台下执行可能会导致系统卡死
 * -Xss2M
 */
public class JavaVMStackOOM {
    private void dontStop(){
         while(true){}
    }
    public void stackLeakByThread(){
        while(true){
            Thread thread = new Thread(new Runnable() {
                @Override
                public void run() {
                    dontStop();
                }
            });
            thread.start();
        }
    }

    public static void main(String[] args) {
        JavaVMStackOOM oom = new JavaVMStackOOM();
        oom.stackLeakByThread();
    }
}

运行结果如下:

Exception in thread"main"java.lang.OutOfMemoryError:unable to create new native thread

上面代码导致OOM的原因不难理解,操作系统分配给每个进程的内存是有限制的,譬如32位的Windows限制为2GB。虚拟机提供了参数来控制Java堆和方法区的这两部分内存的最大值。剩余的内存为2GB(操作系统限制)减去Xmx(最大堆容量),再减去MaxPermSize(最大方法区容量),程序计数器消耗内存很小,可以忽略掉。如果虚拟机进程本身耗费的内存不计算在内,剩下的内存就由虚拟机栈和本地方法栈“瓜分”了。每个线程分配到的栈容量越大,可以建立的线程数量自然就越少,建立线程时就越容易把剩下的内存耗尽;64位的Windows限制为8TB,理论上是可以创建很多线程的,但是,谁的机器内存有8TB??所以,在其他系统如Linux,创建多线程时,尽管未达到进程的内存限制,往往也会达到机器的最大内存,导致OOM。

在开发多线程的应用时特别注意,出现StackOverflowError异常时有错误堆栈可以阅读,相对来说,比较容易找到问题的所在。而且,如果使用虚拟机默认参数,栈深度在大多数情况下(因为每个方法压入栈的帧大小并不是一样的,所以只能说在大多数情况下)达到1000~2000完全没有问题,对于正常的方法调用(包括递归),这个深度应该完全够用了。但是,如果是建立过多线程导致的内存溢出,在不能减少线程数或者更换64位虚拟机的情况下,就只能通过减少最大堆和减少栈容量来换取更多的线程。

3. 方法区和运行时常量池溢出

String.intern()是一个Native方法,它的作用是:如果字符串常量池中已经包含一个等于此String对象的字符串,则返回代表池中这个字符串的String对象;否则,将此String对象包含的字符串添加到常量池中,并且返回此String对象的引用。

import java.util.ArrayList;
import java.util.List;

/**
 * 运行时常量池导致的内存溢出异常*/
public class RuntimeConstantPoolOOM {
    public static void main(String[] args) {
        //使用List保持常量池引用,避免Full GC回收常量池行为
        List<String> list = new ArrayList<String>();
        //10M的PermSize在integer范围内足够产生OOM
        int i = 0;
        while (true){
            list.add(String.valueOf(i++).intern());
        }
    }
}

在JDK 1.6及之前的版本中,由于常量池分配在永久代内,我们可以通过-XX:PermSize和-XX:MaxPermSize限制方法区大小,从而间接限制其中常量池的容量。

JDK 1.6通过设置VM参数设置永久代大小    -XX:PermSize=10M -XX:MaxPermSize=10M,运行结果如下:

报错信息为永久代溢出,说明JDK1.6时运行时常量池在永久代。

JDK 1.7设置VM参数 -Xmx20m -Xms20m -XX:-UseGCOverheadLimit,这里的-XX:-UseGCOverheadLimit是关闭GC占用时间过长时会报的异常,然后限制堆的大小  -Xmx20m -Xms20m 。

报错信息为堆内存溢出,原因是增加的常量都放到了堆中,所以限制堆内存以后,不断增加常量,导致堆内存溢出。说明JDK1.7时运行时常量池在堆中。

在JDK1.8中测试,设置VM参数-XX:MaxDirectMemorySize=10M

由此可证明,在JDK1.2 ~ JDK6的实现中,HotSpot使用永久代实现方法区,从JDK7开始Oracle HotSpot开始移除永久代,JDK7中符号表被移动到Native Heap中,字符串常量和类引用被移动到Java Heap中。在JDK8中,永久代已完全被元空间(Meatspace)所取代。

 

おすすめ

転載: www.cnblogs.com/zjfjava/p/11241809.html