• 【JVM基础】堆


    【JVM基础】堆

    堆的核心概述

    对于大多数应用,Java 堆是 Java 虚拟机管理的内存中最大的一块,被所有线程共享。此内存区域的唯一目的就是存放对象实例,几乎所有的对象实例以及数据都在这里分配内存。

    • 一个进程对应一个JVM实例
    • 一个JVM实例对应一个堆空间
    • 进程包含多个线程,所以线程之间共享同一个堆空间

    image-20220903214814435

    • Java虚拟机规范》规定,堆可以处于物理上不连续的内存空间中,但在逻辑上它应该是被视为连续的。

    • 所有的线程共享Java堆,在这里还可以划分线程私有的缓存区(Thread Local Allocation Buffer,TLAB)。

    • 《Java虚拟机规范》中对Java堆的描述是:所有的对象实例以及数组都应当在运行时分配在堆上。(The heap is the run-time data area from which memory for all class instances and arrays is allocated)

    • “几乎”所有的对象实例都在这里分配内存。——从实际使用角度来看的。

    • 数组和对象可能永远不会存储在栈上,因为栈帧中保存引用,这个引用指向对象或数组在堆中的位置。

    • 在方法结束后(栈帧被弹出栈后),堆中的对象不会马上被移除,仅仅在垃圾收集的时候才会被移除。

    • 堆,是GC(Garbage Conllection,垃圾收集器)执行垃圾回收的重点区域。

    image-20220903214945294

    内存划分

    为了进行高效的垃圾回收,虚拟机把堆内存逻辑上划分成三块区域(分代的唯一理由就是优化 GC 性能):

    • 新生带(年轻代):新对象和没达到一定年龄的对象都在新生代、
    • 老年代(养老区):被长时间使用的对象,老年代的内存空间应该要比年轻代更大
    • 元空间(JDK1.8 之前叫永久代):像一些方法中的操作临时对象等,JDK1.8 之前是占用 JVM 内存,JDK1.8 之后直接使用物理内存
    • image-20220903215327402

    约定:新生区 = 新生代 = 年轻代养老区 = 老年区 = 老年代永久区 = 永久代

    • 堆空间内部结构,JDK1.8之前从永久代 替换成 元空间
    • 堆空间逻辑上包括 永久代/元空间,实际上控制不到

    image-20220903215601834

    Java 虚拟机规范规定,Java 堆可以是处于物理上不连续的内存空间中,只要逻辑上是连续的即可,像磁盘空间一样。实现时,既可以是固定大小,也可以是可扩展的,主流虚拟机都是可扩展的(通过 -Xmx-Xms 控制),如果堆中没有完成实例分配,并且堆无法再扩展时,就会抛出 OutOfMemoryError 异常。

    Java 对象分类

    存储在JVM中的Java对象可以被划分为两类:

    • 一类是生命周期较短的瞬时对象,这类对象的创建和消亡都非常迅速

    • 另外一类对象的生命周期却非常长,在某些极端的情况下还能够与JVM的生命周期保持一致

    • Java堆区进一步细分的话,可以划分为年轻代(YoungGen)和老年代(oldGen)

    • 其中年轻代又可以划分为Eden空间、Survivor0空间和Survivor1空间(有时也叫做from区、to区)

    image-20220903220157523

    年轻代

    年轻代是所有新对象创建的地方。当填充年轻代时,执行垃圾收集。这种垃圾收集称为 Minor GC。年轻一代被分为三个部分——伊甸园(Eden Memory)和两个幸存区(Survivor Memory,被称为from/to或s0/s1),默认比例是8:1:1

    • 大多数新创建的对象都位于 Eden 内存空间中

    • 当 Eden 空间被对象填充时,执行Minor GC,并将所有幸存者对象移动到一个幸存者空间中

    • Minor GC 检查幸存者对象,并将它们移动到另一个幸存者空间。所以每次,一个幸存者空间总是空的

    • 经过多次 GC 循环后存活下来的对象被移动到老年代。通常,这是通过设置年轻一代对象的年龄阈值来实现的,然后他们才有资格提升到老一代

    老年代

    旧的一代内存包含那些经过许多轮小型 GC 后仍然存活的对象。通常,垃圾收集是在老年代内存满时执行的。老年代垃圾收集称为 主GC(Major GC),通常需要更长的时间。

    大对象直接进入老年代(大对象是指需要大量连续内存空间的对象)。这样做的目的是避免在 Eden 区和两个Survivor 区之间发生大量的内存拷贝

    image-20220903220343807

    元空间

    不管是 JDK8 之前的永久代,还是 JDK8 及以后的元空间,都可以看作是 Java 虚拟机规范中方法区的实现。

    虽然 Java 虚拟机规范把方法区描述为堆的一个逻辑部分,但是它却有一个别名叫 Non-Heap(非堆),目的应该是与 Java 堆区分开。

    所以元空间放在后边的方法区再说。

    详解对象分配过程

    为新对象分配内存是一件非常严谨和复杂的任务,JVM的设计者们不仅需要考虑内存如何分配、在哪里分配等问题,并且由于内存分配算法与内存回收算法密切相关,所以还需要考虑GC执行完内存回收后是否会在内存空间中产生内存碎片。

    1. new的对象先放伊甸园区(Eden)。此区有大小限制。
    2. 当伊甸园的空间添满时,程序有需要创建对象,JVM的垃圾回收器将对伊甸园区进行垃圾回收(Minor GC)(幸存者区不会触发垃圾收集器的回收),将伊甸园区中的不再被其他对象所引用的对象进行销毁。再加载新的对象放到伊甸园区。
    3. 然后将伊甸园中的剩余对象移动到幸存者0区。
    4. 如果再次出发垃圾回收,此时上次幸存下来的放到幸存者0区中的对象,如果没有被回收,就会放到幸存者1区。
    5. 如果再次经历垃圾回收,此时会重新放回幸存者0区,接着再去幸存者1区。
    图解对象分配
    • 我们创建的对象,一般都是存放在Eden区的,当我们的Eden区满了后,就会触发GC操作,一般被称为 YGC / Minor GC操作

    image-20220904012733117

    • 当我们进行一次垃圾收集后,红色的对象将会被回收,而绿色的独享还被占用着,存放在S0(Survivor From)区。同时我们给每个对象设置了一个年龄计数器,经过一次回收后还存在的对象,将其年龄加 1。

    • 同时Eden区继续存放对象,当Eden区再次存满的时候,又会触发一个MinorGC操作,此时GC将会把 Eden和Survivor From中的对象进行一次垃圾收集,把存活的对象放到 Survivor To区,同时让存活的对象年龄 + 1

    image-20220904012758941

    • 我们继续不断的进行对象生成和垃圾回收,当Survivor中的对象的年龄达到15的时候,将会触发一次 Promotion 晋升的操作,也就是将年轻代中的对象晋升到老年代中

    image-20220904012811903

    • 注意【伊甸园区、幸存者区、老年区】的内存变化趋势

    img

    特殊情况说明

    幸存区满了咋办?

    • 特别注意,在Eden区满了的时候,才会触发MinorGC,而幸存者区满了后,不会触发MinorGC操作

    • 如果Survivor区满了后,将会触发一些特殊的规则,也就是可能直接晋升老年代

    对象分配的特殊情况?

    • 如果来了一个新对象,先看看 Eden 是否放的下?

      • 如果 Eden 放得下,则直接放到 Eden 区
      • 如果 Eden 放不下,则触发 YGC ,执行垃圾回收,看看还能不能放下?放得下最好当然最好咯
    • 将对象放到老年区又有两种情况:

      • 如果 Eden 执行了 YGC 还是无法放不下该对象,那没得办法,只能说明是超大对象,只能直接怼到老年代
      • 那万一老年代都放不下,则先触发重 GC ,再看看能不能放下,放得下最好,但如果还是放不下,那只能报 OOM 啦~~~
    • 如果 Eden 区满了,将对象往幸存区拷贝时,发现幸存区放不下啦,那只能便宜了某些新对象,让他们直接晋升至老年区

    对象分配过程总结:
    • 针对幸存者s0,s1区的总结:复制之后有交换,谁空谁是to.

    • 关于垃圾回收:频繁在新生区收集,很少在养老区收集,几乎不在永久区/元空间收集。

    image-20220904013150577

    GC 垃圾回收简介

    Minor GC、Major GC、Full GC简介

    JVM 在进行 GC 时,并非每次都对堆内存(新生代、老年代;方法区)区域一起回收的,大部分时候回收的都是指新生代。

    针对 HotSpot VM 的实现,它里面的 GC 按照回收区域又分为两大类:部分收集(Partial GC),整堆收集(Full GC)。

    部分收集:不是完整收集整个 Java 堆的垃圾收集。其中又分为:

    • 新生代收集(Minor GC/Young GC):只是新生代的垃圾收集
    • 老年代收集(Major GC/Old GC):只是老年代的垃圾收集
      • 目前,只有 CMS GC 会有单独收集老年代的行为
      • 很多时候 Major GC 会和 Full GC 混合使用,需要具体分辨是老年代回收还是整堆回收
    • 混合收集(Mixed GC):收集整个新生代以及部分老年代的垃圾收集
      • 目前只有 G1 GC 会有这种行为

    整堆收集(Full GC):收集整个 Java 堆和方法区的垃圾。

    Young/Minor GC
    • 当年轻代空间不足时,就会触发Minor GC,这里的年轻代满指的是Eden区满,Survivor区满不会触发GC。(每次Minor GC会清理年轻代的内存)

    • 因为Java对象大多都具备朝生夕灭的特性,所以Minor GC非常频繁,一般回收速度也比较快。这一定义既清晰又易于理解。

    • Minor GC会引发STW暂停其它用户的线程,等待垃圾回收线程结束,用户线程才恢复运行

    image-20220904013641223

    Major GC
    • 指发生在老年代的GC,对象从老年代消失时,我们说 “Major Gc” 或 “Full GC” 发生了

    • 出现了MajorGc,经常会伴随至少一次的Minor GC

      • 但非绝对的,在Parallel Scavenge收集器的收集策略里就有直接进行Major GC的策略选择过程
      • 也就是在老年代空间不足时,会先尝试触发Minor GC,如果之后空间还不足,则触发Major GC
    • Major GC的速度一般会比Minor GC慢10倍以上,STW的时间更长

    • 如果Major GC后,内存还不足,就报OOM了

    Full GC

    触发Full GC执行的情况有如下五种:

    • 调用System.gc( )时,系统建议执行Full GC,但是不必然执行
    • 老年代空间不足
    • 方法区空间不足
    • 通过Minor GC后进入老年代的平均大小 大于 老年代的可用内存
    • 由Eden区、survivor space0(From Space)区 向survivor space1(To Space)区复制时,对象大小大于To Space可用内存,则把该对象转存到老年代,且老年代的可用内存 小于 该对象大小

    说明:Full GC 是开发或调优中尽量要避免的。这样STW时间会短一些

    堆空间分代思想

    • 经研究,不同对象的生命周期不同。70%-99%的对象是临时对象。
    • 其实不分代完全可以,分代的唯一理由就是优化GC性能
      • 新生代:有Eden、两块大小相同的Survivor(又称为from/to,s0/s1)构成,to总为空。
      • 老年代:存放新生代中经历多次GC之后仍然存活的对象。
      • 如果没有分代,那所有的对象都在一块,就如同把一个学校的人都关在一个教室。GC的时候要找到哪些对象没用,这样就会对堆的所有区域进行扫描。
      • 而很多对象都是朝生夕死的,如果分代的话,把新创建的对象放到某一地方,当GC的时候先把这块存储“朝生夕死”对象的区域进行回收,这样就会腾出很大的空间出来。

    image-20220904014108027

    内存分配策略

    • 如果对象在Eden出生并经过第一次Minor GC后仍然存活,并且能被Survivor容纳的话,将被移动到Survivor空间中,并将对象年龄设为1。

    • 对象在Survivor区中每熬过一次MinorGC,年龄就增加1岁,当它的年龄增加到一定程度(默认为15岁,其实每个JVM、每个GC都有所不同)时,就会被晋升到老年代

    • 对象晋升老年代的年龄阀值,可以通过选项**-XX:MaxTenuringThreshold**来设置

    针对不同年龄段的对象分配原则如下所示
    • 优先分配到Eden

    • 大对象直接分配到老年代

      • 尽量避免程序中出现过多的大对象
    • 长期存活的对象分配到老年代

    • 动态对象年龄判断:

      • 如果Survivor区中相同年龄的所有对象大小的总和 大于 Survivor空间的一半,年龄大于或等于该年龄的对象可以直接进入老年代,无须等到MaxTenuringThreshold中要求的年龄。
    • 空间分配担保:

      • -XX:HandlePromotionFailure ,也就是经过Minor GC后,所有的对象都存活,因为Survivor比较小,所以就需要将Survivor无法容纳的对象,存放到老年代中。

    image-20220904014237303

    TLAB:为对象分配内存

    为什么有 TLAB?

    因为堆是线程之间共享的,如果在并发场景中,两个线程先后把对象的引用指向了同一个内存区域,怎么办?

    为了解决这个并发问题,对象的内存分配过程就必须进行同步控制,但是,无论使用哪种方案(有可能是CAS),都会影响内存的分配效率。然而对于 Java 来说对象的分配是高频操作。

    由此 HotSpot 虚拟机采用了这个方案:每个线程在 Java 堆中预先分配一小块内存,然后在给对象分配内存的时候,直接在自己的这块”私有“内存中进行分配,当这部分用完之后,再分配新的”私有“内存。

    这种方案被称之为 TLAB 分配。这部分 buffer 是从堆中划分出来的,但是本地线程独享的。

    什么是 TLAB?
    • 从内存模型而不是垃圾收集的角度,对Eden区域继续进行划分,JVM为每个线程分配了一个私有缓存区域,它包含在Eden空间内

    • 多线程同时分配内存时,使用TLAB可以避免一系列的非线程安全问题,同时还能够提升内存分配的吞吐量,因此我们可以将这种内存分配方式称之为快速分配策略

    image-20220904014518319

    TLAB 分配过程
    • 尽管不是所有的对象实例都能够在TLAB中成功分配内存,但JVM确实是将TLAB作为内存分配的首选

    • 在程序中,开发人员可以通过选项“-XX:UseTLAB”设置是否开启TLAB空间。

    • 默认情况下,TLAB空间的内存非常小,仅占有整个Eden空间的1%,当然我们可以通过选项“-XX:TLABWasteTargetPercent”设置TLAB空间所占用Eden空间的百分比大小。

    • 一旦对象在TLAB空间分配内存失败时,JVM就会尝试着通过使用加锁机制确保数据操作的原子性,从而直接在Eden空间中分配内存。

    image-20220904014605501

    堆是分配对象存储的唯一选择吗?

    否定之否定!可以和面试官聊聊!

    在《深入理解Java虚拟机》中关于Java堆内存有这样一段描述:

    随着JIT编译期的发展与逃逸分析技术逐渐成熟,栈上分配、标量替换优化技术将会导致一些微妙的变化,所有的对象都分配到堆上也渐渐变得不那么“绝对”了。

    在Java虚拟机中,对象是在Java堆中分配内存的,这是一个普通的常识。但是,有一种特殊情况,那就是如果经过逃逸分析(Escape Analysis)后发现,一个对象并没有逃逸出方法的话,那么就可能被优化成栈上分配。这样就无须在堆上分配内存,也无须进行垃圾会收了。这也是最常见的堆外存储技术。

    此外,前面提到的基于OpenJDK深度定制的TaobaoVM,其中创新的GCIH(GC invisible heap)技术实现off-heap,将生命周期较长的Java对象从heap中移至heap外,并且GC不能管理GCIH内部的Java对象,以此达到降低GC的回收频率和提升GC的回收效率的目的。

    • 如何将堆上的对象分配到栈?需要使用逃逸分析手段;

    • 这是一种可以有效减少Java 程序中同步负载和内存堆分配压力的跨函数全局数据流分析算法;

    • 通过逃逸分析,Java Hotspot编译器能够分析出一个新的对象的引用的使用范围从而决定是否要将这个对象分配到堆上;

    • 逃逸分析的基本行为就是分析对象动态作用域:

    • 当一个对象在方法中被定义后,对象只在方法内部使用,则认为没有发生逃逸;

    • 当一个对象在方法中被定义后,它被外部方法所引用,则认为发生逃逸。例如作为调用参数传递到其他地方中。

    逃逸分析

    逃逸分析(Escape Analysis)*是目前 Java 虚拟机中比较前沿的优化技术*。这是一种可以有效减少 Java 程序中同步负载和内存堆分配压力的跨函数全局数据流分析算法。通过逃逸分析,Java Hotspot 编译器能够分析出一个新的对象的引用的使用范围从而决定是否要将这个对象分配到堆上。

    逃逸分析的基本行为就是分析对象动态作用域:

    • 当一个对象在方法中被定义后,对象只在方法内部使用,则认为没有发生逃逸。
    • 当一个对象在方法中被定义后,它被外部方法所引用,则认为发生逃逸。例如作为调用参数传递到其他地方中,称为方法逃逸。
    public static StringBuffer craeteStringBuffer(String s1, String s2) {
       StringBuffer sb = new StringBuffer();
       sb.append(s1);
       sb.append(s2);
       return sb;
    }
    
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7

    StringBuffer sb是一个方法内部变量,上述代码中直接将sb返回,这样这个 StringBuffer 有可能被其他方法所改变,这样它的作用域就不只是在方法内部,虽然它是一个局部变量,但是其逃逸到了方法外部。甚至还有可能被外部线程访问到,譬如赋值给类变量或可以在其他线程中访问的实例变量,称为线程逃逸。

    上述代码如果想要 StringBuffer sb不逃出方法,可以这样写:

    public static String createStringBuffer(String s1, String s2) {
       StringBuffer sb = new StringBuffer();
       sb.append(s1);
       sb.append(s2);
       return sb.toString();
    }
    
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7

    不直接返回 StringBuffer,那么 StringBuffer 将不会逃逸出方法。

    使用逃逸分析,编译器可以对代码做如下优化:

    一、栈上分配。将堆分配转化为栈分配。如果一个对象在子程序中被分配,要使指向该对象的指针永远不会逃逸,对象可能是栈分配的候选,而不是堆分配。

    二、同步省略。如果一个对象被发现只能从一个线程被访问到,那么,对于这个对象的操作可以不考虑同步。

    三、分离对象或标量替换。有的对象可能不需要作为一个连续的内存结构存在也可以被访问到,那么对象的部分(或全部)可以不存储在内存,而是存储在CPU寄存器中。

    代码优化之同步省略(消除)

    • 线程同步的代价是相当高的,同步的后果是降低并发性和性能
    • 在动态编译同步块的时候,JIT 编译器可以借助逃逸分析来判断同步块所使用的锁对象是否能够被一个线程访问而没有被发布到其他线程。如果没有,那么 JIT 编译器在编译这个同步块的时候就会取消对这个代码的同步。这样就能大大提高并发性和性能。这个取消同步的过程就叫做同步省略,也叫锁消除
    public void keep() {
      Object keeper = new Object();
      synchronized(keeper) {
        System.out.println(keeper);
      }
    }
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6

    如上代码,代码中对 keeper 这个对象进行加锁,但是 keeper 对象的生命周期只在 keep()方法中,并不会被其他线程所访问到,所以在 JIT编译阶段就会被优化掉。优化成:

    public void keep() {
      Object keeper = new Object();
      System.out.println(keeper);
    }
    
    • 1
    • 2
    • 3
    • 4

    代码优化之标量替换

    标量(Scalar)是指一个无法再分解成更小的数据的数据。Java 中的原始数据类型就是标量。

    相对的,那些的还可以分解的数据叫做聚合量(Aggregate),Java 中的对象就是聚合量,因为其还可以分解成其他聚合量和标量。

    在 JIT 阶段,通过逃逸分析确定该对象不会被外部访问,并且对象可以被进一步分解时,JVM 不会创建该对象,而会将该对象成员变量分解若干个被这个方法使用的成员变量所代替。这些代替的成员变量在栈帧或寄存器上分配空间。这个过程就是标量替换

    通过 -XX:+EliminateAllocations 可以开启标量替换,-XX:+PrintEliminateAllocations 查看标量替换情况。

    public static void main(String[] args) {
       alloc();
    }
    
    private static void alloc() {
       Point point = new Point1,2;
       System.out.println("point.x="+point.x+"; point.y="+point.y);
    }
    class Point{
        private int x;
        private int y;
    }
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12

    以上代码中,point 对象并没有逃逸出 alloc() 方法,并且 point 对象是可以拆解成标量的。那么,JIT 就不会直接创建 Point 对象,而是直接使用两个标量 int x ,int y 来替代 Point 对象。

    private static void alloc() {
       int x = 1;
       int y = 2;
       System.out.println("point.x="+x+"; point.y="+y);
    }
    
    • 1
    • 2
    • 3
    • 4
    • 5

    代码优化之栈上分配

    常见栈上分配的场景:成员变量赋值、方法返回值、实例引用传递

    我们通过 JVM 内存分配可以知道 JAVA 中的对象都是在堆上进行分配,当对象没有被引用的时候,需要依靠 GC 进行回收内存,如果对象数量较多的时候,会给 GC 带来较大压力,也间接影响了应用的性能。为了减少临时对象在堆内分配的数量,JVM 通过逃逸分析确定该对象不会被外部访问。那就通过标量替换将该对象分解在栈上分配内存,这样该对象所占用的内存空间就可以随栈帧出栈而销毁,就减轻了垃圾回收的压力。

    总结:

    关于逃逸分析的论文在1999年就已经发表了,但直到JDK 1.6才有实现,而且这项技术到如今也并不是十分成熟的。

    其根本原因就是无法保证逃逸分析的性能消耗一定能高于他的消耗。虽然经过逃逸分析可以做标量替换、栈上分配、和锁消除。但是逃逸分析自身也是需要进行一系列复杂的分析的,这其实也是一个相对耗时的过程。

    一个极端的例子,就是经过逃逸分析之后,发现没有一个对象是不逃逸的。那这个逃逸分析的过程就白白浪费掉了。

    都是在堆上进行分配,当对象没有被引用的时候,需要依靠 GC 进行回收内存,如果对象数量较多的时候,会给 GC 带来较大压力,也间接影响了应用的性能。为了减少临时对象在堆内分配的数量,JVM 通过逃逸分析确定该对象不会被外部访问。那就通过标量替换将该对象分解在栈上分配内存,这样该对象所占用的内存空间就可以随栈帧出栈而销毁,就减轻了垃圾回收的压力。

  • 相关阅读:
    <c++> &引用概念 | 引用用法 | 引用与指针区别
    《凤凰架构》读书笔记 —— 本地事务如何实现原子性和持久性?
    R语言回归及混合效应模型及贝叶斯实现
    Windows CMD常用命令大全(所见即所得)
    基于springboot实现的rabbitmq消息确认
    WireShark抓包分析TCP三次握手过程,TCP报文解析
    视野修炼-技术周刊第56期
    【历史上的今天】6 月 29 日:SGI 和 MIPS 合并;微软收购 PowerPoint 开发商;新闻集团出售 Myspace
    湘潭大学软件工程数据库2(题型,复习资源和计划)
    3.3让我们直接对显示器说点什么吧
  • 原文地址:https://blog.csdn.net/weixin_63566550/article/details/126688585