第06章_堆
6.1. 堆(Heap)的核心概述
在 JVM 中,堆是用于存储对象实例和数组的区域。
- 堆针对一个JVM进程来说是唯一的,也就是一个进程只有一个JVM,进程中的多个线程共享同一堆空间的。
- ==一个JVM实例只存在一个堆内存,堆也是Java内存管理的核心区域。==
- ==Java堆区在JVM启动的时候即被创建,其空间大小也就确定了。是JVM管理的最大一块内存空间。==
- 堆可以处于物理上不连续的内存空间中,但在逻辑上它应该被视为连续的。
- 所有的线程共享Java堆。在这里还可以划分线程私有的缓冲区(Thread Local Allocation Buffer,TLAB)。
- 《Java虚拟机规范》中对Java堆的描述是:所有的对象实例以及数组都应当在运行时分配在堆上。
- 数组和对象可能永远不会存储在栈上,因为栈帧中保存引用,这个引用指向对象或者数组在堆中的位置。
- 在方法结束后,堆中的对象不会马上被移除,仅仅在垃圾收集的时候才会被移除。
- ==堆,是GC(Garbage Collection,垃圾收集器)执行垃圾回收的重点区域。==
6.2. 虚拟机栈、堆和方法区的关系
- 虚拟机栈存储的是方法调用过程中的临时数据和调用者的地址信息。
- 堆存储对象和数组等数据。
- 方法区存储类信息、常量、静态变量等数据。
6.3. 堆内存细分
Java 7及之前堆内存逻辑上分为三部分:新生代+老年代+永久代
Java 8及之后堆内存逻辑上分为三部分:新生代+老年代+元空间
约定:==新生区(代)<=>年轻代 、 养老区<=>老年区(代)、 永久区<=>永久代==
6.4.堆内存设置和Visual VM(虚拟机监视器)
Java堆区用于存储Java对象实例,那么堆的大小在JVM启动时就已经设定好了,大家可以通过选项”-Xmx”和”-Xms”来进行设置。
“-Xms”用于表示堆区的起始内存,等价于
-XX:InitialHeapSize
“-Xmx”则用于表示堆区的最大内存,等价于
-XX:MaxHeapSize
一旦堆区中的内存大小超过“-Xmx”所指定的最大内存时,将会抛出OutOfMemoryError
异常。
通常会将-Xms和-Xmx两个参数配置相同的值,其目的是为了防止Java垃圾回收机制清理完堆区后不需要重新计算堆区的大小,从而提高性能。
默认情况下
初始内存大小:物理电脑内存大小 / 64
最大内存大小:物理电脑内存大小 / 4
- 在
Configurations
设置堆内存大小
- 启动main方法,并打开
Visual VM
从下图可以看出:==新生代+老年代一共20M==
6.5.堆内存OutOfMemory(堆内存溢出异常)
由于堆内存中存储的是对象实例和数组,所以可以设置堆内存大小,并采用如下代码来使堆内存溢出。
6.6. 年轻代与老年代
6.6.1年轻代和老年代结构划分
存储在JVM中的Java对象可以被划分为两类:
==一类是生命周期较短的瞬时对象,这类对象的创建和消亡都非常迅速==
==另外一类对象的生命周期却非常长,在某些极端的情况下还能够与JVM的生命周期保持一致==
Java堆区进一步细分的话,可以划分为年轻代(YoungGen)和老年代(oldGen)
其中年轻代又可以划分为Eden
区、Survivor0
区和Survivor1
区(有时也叫做from区、to区)
6.6.2年轻代和老年代的结构占比
配置新生代与老年代在堆结构的占比。
默认
-XX:NewRatio=2
,表示新生代占1,老年代占2,新生代占整个堆的1/3可以修改
-XX:NewRatio=4
,表示新生代占1,老年代占4,新生代占整个堆的1/5
6.6.3年轻代中edeu区和survivor0、survivor1区结构占比
在HotSpot中,Eden空间和另外两个survivor空间缺省所占的比例是8:1:1,但是事实上却不是该比例,是由于自适应策略
。
当然开发人员可以通过选项“-xx:SurvivorRatio
”调整这个空间比例。比如-xx:SurvivorRatio=8
几乎所有的Java对象都是在Eden区被new出来的。绝大部分的Java对象的销毁都在新生代进行了。
- IBM公司的专门研究表明,新生代中80%的对象都是“朝生夕死”的。
可以使用选项”-Xmn
“设置新生代最大内存大小,这个参数一般使用默认值就可以了。
6.7堆中对象的分配过程
6.7.1堆中对象的分配的步骤
为新对象分配内存是一件非常严谨和复杂的任务,JVM的设计者们不仅需要考虑内存如何分配、在哪里分配等问题,并且由于内存分配算法与内存回收算法密切相关,所以还需要考虑GC执行完内存回收后是否会在内存空间中产生内存碎片。
new的对象先放入
Eden
区。此区有大小限制。当
Eden
的空间填满时,程序又需要创建对象,Young GC
将对Eden
区进行垃圾回收(MinorGC),将Eden
区中的不再被其他对象所引用的对象进行销毁。再加载新的对象放到Eden
区然后将
Eden
中的剩余对象移动到survivor0
区,放入survivor
区后对象的年龄计数器
就会加1。如果再次触发垃圾回收,将
Eden
区中继续使用的对象和上次幸存下来的放到survivor0
区的,如果没有回收,就会都放到survivor1
区。如果再次经历垃圾回收,此时会重新放回
survivor0
区,接着再去survivor1
区。啥时候能去老年代呢?可以设置
年龄计数器
。默认是15次。
- 可以设置参数:进行设置
-Xx:MaxTenuringThreshold= N
当老年代内存不足时,再次触发GC:Major GC,进行老年代的内存清理
若老年代执行了Major GC之后,发现依然无法进行对象的保存,就会产生OOM异常。
流程图如下:
总结
对于
survivor
当中的from区
和to区
是不固定的,当谁为空时,谁就是to区
,Eden区
中继续使用的对象就会放到to
区。当
survivor
区满的时候,不会触发垃圾回收机制。而survivor
区的垃圾回收时跟随Eden
区的垃圾回收进行的。关于垃圾回收:频繁在新生区收集,很少在老年代收集,几乎不再永久代和元空间进行收集
6.7.1堆中对象分配的演示
- 使用如下代码进行演示:
可以发现下图5:
- 当
Eden
区内存满后,Yong GC
就会对其进行垃圾回收,将继续使用的对象存放在survivor
区的to
区。 - 对
Eden
区进行垃圾回收的同时,对survivor
区也进行垃圾回收,将超过阈值(15次)的对象放入老年代。 - 当老年代内存满的时候就会出现
OutOfMemoryError
异常。
根据图表,对堆中对象的分配过程
进行分析:
6.5. Minor GC,MajorGC、Full GC
6.5.1Minor GC,MajorGC、Full GC的区别
JVM在进行GC时,并非每次都对上面三个内存区域一起回收的,大部分时候回收的都是指新生代
。
针对Hotspot VM的实现,它里面的GC按照回收区域又分为两大种类型:一种是部分收集(Partial GC),一种是整堆收集(FullGC)
部分收集:不是完整收集整个Java堆的垃圾收集。其中又分为:
新生代收集(Minor GC / Young GC):只是新生代的垃圾收集
老年代收集(Major GC / Old GC):只是老年代的垃圾收集。
目前,只有CMSGC会有单独收集老年代的行为。
注意,很多时候Major GC会和Full GC混淆使用,需要具体分辨是老年代回收还是整堆回收。
混合收集(MixedGC):收集整个新生代以及部分老年代的垃圾收集。
目前,只有G1 GC会有这种行为
- 整堆收集(Full GC):收集整个java堆和方法区的垃圾收集。
6.5.1. GC策略的触发条件
6.5.1.1年轻代GC(Minor GC)触发机制
当年轻代空间不足时,就会触发MinorGC,这里的年轻代满指的是Eden代满,Survivor满不会引发GC。(每次Minor GC会清理年轻代的内存。)
因为Java对象大多都具备朝生夕灭的特性.,所以Minor GC非常频繁,一般回收速度也比较快。这一定义既清晰又易于理解。
Minor GC会引发STW,暂停其它用户的线程,等垃圾回收结束,用户线程才恢复运行
6.5.1.2老年代GC(Major GC)触发机制
- 指发生在老年代的GC,对象从老年代消失时,我们说 “Major GC” 或 “Full GC” 发生了
- 出现了Major Gc,经常会伴随至少一次的Minor GC(但非绝对的,在Paralle1 Scavenge收集器的收集策略里就有直接进行MajorGC的策略选择过程)
- 也就是在老年代空间不足时,会先尝试触发Minor Gc。如果之后空间还不足,则触发Major GC
- Major GC的速度一般会比Minor GC慢10倍以上,STW的时间更长
- 如果Major GC后,内存还不足,就报OOM了
6.5.1.3Full GC触发机制(后面细讲):
触发Full GC执行的情况有如下五种:
调用System.gc()时,系统建议执行Full GC,但是不必然执行
老年代空间不足
方法区空间不足(JDK1.7及之前的永久代内存不足)
通过Minor GC后进入老年代的平均大小大于老年代的可用内存
由Eden区、survivor space0(From Space)区向survivor space1(To Space)区复制时,对象大小大于To Space可用内存,则把该对象转存到老年代,且老年代的可用内存小于该对象大小
说明:Full GC 是开发或调优中尽量要避免的。这样用户线程
暂时时间会短一些
6.5.2案例演示GC的回收情况
- 代码如下
- 配置JVM参数
- 查看GC日志
6.6. 堆空间分代思想
为什么要把Java堆分代?不分代就不能正常工作了吗?
经研究,不同对象的生命周期不同。==70%-99%的对象是临时对象。==
新生代:有Eden、两块大小相同的survivor(又称为from/to,s0/s1)构成,to总为空。
老年代:存放新生代中经历多次GC仍然存活的对象。
其实不分代完全可以,**分代的唯一理由就是优化GC性能**。如果没有分代,那所有的对象都在一块,就如同把一个学校的人都关在一个教室。GC的时候要找到哪些对象没用,这样就会对堆的所有区域进行扫描。而很多对象都是朝生夕死的,如果分代的话,把新创建的对象放到某一地方,当GC的时候先把这块存储“朝生夕死”对象的区域进行回收,这样就会腾出很大的空间出来。
6.7. 内存分配策略
如果对象在Eden出生并经过第一次Minor GC后仍然存活,并且能被Survivor容纳的话,将被移动到survivor空间中,并将对象的年龄计数器
设为1。对象在survivor区中每熬过一次MinorGC,年龄就增加1岁,当它的年龄增加到一定程度(默认为15岁,其实每个JVM、每个GC都有所不同)时,就会被晋升到老年代。
对象晋升老年代的年龄阀值,可以通过选项-XX:MaxTenuringThreshold
来设置
针对不同年龄段的对象分配原则如下所示:
优先分配到Eden
大对象直接分配到老年代(尽量避免程序中出现过多的大对象)
长期存活的对象分配到老年代
动态对象年龄判断:如果survivor区中年龄从小到大的对象占据的空间,大于survivor区域的一半,年龄大于或等于该年龄的对象可以直接进入老年代,无须等到
MaxTenuringThreshold
中要求的年龄。最后取这个年龄和MaxTenuringThreshold中更小的一个值,作为新的晋升年龄阈值。空间分配担保:
-XX:HandlePromotionFailure
空间分配担保是为了确保老年代当中有足够的连续内存用于存储在发生Minor GC时,年轻代中的所有对象都存活的情况。
《深入理解 Java 虚拟机》第三章对于空间分配担保的描述如下:JDK 6 Update 24 之前,在发生 Minor GC 之前,虚拟机必须先检查老年代最大可用的连续空间是否大于新生代所有对象总空间,如果这个条件成立,那这一次 Minor GC 可以确保是安全的。如果不成立,则虚拟机会先查看 -XX:HandlePromotionFailure 参数的设置值是否允许担保失败(Handle Promotion Failure);如果允许,那会继续检查老年代最大可用的连续空间是否大于历次晋升到老年代对象的平均大小,如果大于,将尝试进行一次 Minor GC,尽管这次 Minor GC 是有风险的;如果小于,或者 -XX: HandlePromotionFailure 设置不允许冒险,那这时就要改为进行一次 Full GC。JDK 6 Update 24 之后的规则变为只要老年代的连续空间大于新生代对象总大小或者历次晋升的平均大小,就会进行 Minor GC,否则将进行 Full GC。
6.8. 为对象分配内存:TLAB
6.8.1. 为什么有TLAB
堆区是线程共享区域,任何线程都可以访问到堆区中的共享数据
由于对象实例的创建在JVM中非常频繁,因此==在并发环境下多个线程从堆区中划分内存空间是线程不安全的==
为避免多个线程操作同一地址,需要使用加锁等机制,进而影响分配速度。
6.8.2. 什么是TLAB?
- TLAB:Thread Local Allocation Buffer,即
线程分配缓冲区
从内存模型而不是垃圾收集的角度,对Eden区域继续进行划分,JVM为每个线程分配了一个私有
缓存区域
,它包含在Eden空间内。多线程同时分配内存时,使用TLAB可以避免一系列的非线程安全问题,同时还能够提升内存分配的吞吐量,因此我们可以将这种内存分配方式称之为快速分配策略。
据我所知所有OpenJDK衍生出来的JVM都提供了TLAB的设计。
6.8.3. TLAB的再说明
尽管不是所有的对象实例都能够在TLAB中成功分配内存,但JVM确实是将TLAB作为内存分配的首选。
在程序中,开发人员可以通过选项“
-XX:UseTLAB
”设置是否开启TLAB空间。默认情况下,TLAB空间的内存非常小,仅占有整个Eden空间的1%,当然我们可以通过选项 “
-XX:TLABWasteTargetPercent
” 设置TLAB空间所占用Eden空间的百分比大小。一旦对象在TLAB空间分配内存失败时,JVM就会尝试着通过使用加锁机制确保数据操作的原子性,从而直接在Eden空间中分配内存。
6.9. 小结:堆空间的参数设置
官网地址:https://docs.oracle.com/javase/8/docs/technotes/tools/windows/java.html
在发生Minor GC之前,虚拟机会检查老年代最大可用的连续空间是否大于新生代所有对象的总空间。
如果大于,则此次Minor GC是安全的
如果小于,则虚拟机会查看
-XX:HandlePromotionFailure
设置值是否允担保失败。如果
HandlePromotionFailure=true
,那么会继续检查老年代最大可用连续空间是否大于历次晋升到老年代的对象的平均大小。- 如果大于,则尝试进行一次Minor GC,但这次Minor GC依然是有风险的;
- 如果小于,则改为进行一次Full GC。
如果
HandlePromotionFailure=false
,则改为进行一次Full Gc。
在JDK6 Update24之后,HandlePromotionFailure参数不会再影响到虚拟机的空间分配担保策略
,观察openJDK中的源码变化,虽然源码中还定义了HandlePromotionFailure参数,但是在代码中已经不会再使用它。JDK6 Update 24之后的规则变为==只要老年代的连续空间大于新生代对象总大小
或者历次晋升的平均大小
就会进行Minor GC==,否则将进行FullGC。
6.10. 对象的堆外存储技术
6.10.1堆外存储技术概述
在Java虚拟机中,对象是在Java堆中分配内存的,这是一个普遍的常识。但是,有一种特殊情况,那就是如果经过逃逸分析(Escape Analysis)后发现,一个对象并没有逃逸出方法的话,那么就可能被优化成栈上分配。==这样就无需在堆上分配内存,也无须进行垃圾回收了。这也是最常见的堆外存储技术。==
6.10.2. 逃逸分析概述
如何将堆上的对象分配到栈,需要使用逃逸分析手段。
==这是一种可以有效减少Java程序中同步负载和内存堆分配压力的跨函数全局数据流分析算法。==
通过逃逸分析,Java Hotspot编译器能够分析出一个新的对象的引用的使用范围从而决定是否要将这个对象分配到堆上。
逃逸分析的基本行为就是分析对象动态作用域:
当一个对象在方法中被定义后,对象只在方法内部使用,则认为没有发生逃逸。
当一个对象在方法中被定义后,它被外部方法所引用,则认为发生逃逸。例如作为调用参数传递到其他地方中。
举例1
没有发生逃逸的对象,则可以分配到栈上,随着方法执行的结束,栈空间就被移除,每个栈里面包含了很多栈帧
上述方法如果想要StringBuffer sb
不发生逃逸,可以这样写
举例2
参数设置
在JDK 6u23 版本之后,HotSpot中默认就已经开启了逃逸分析
如果使用的是较早的版本,开发人员则可以通过:
选项“
-XX:+DoEscapeAnalysis
“显式开启逃逸分析通过选项“
-XX:+PrintEscapeAnalysis
“查看逃逸分析的筛选结果
结论:开发中能使用局部变量的,就不要使用在方法外定义。
6.10.3. 通过逃逸分析对代码优化
使用逃逸分析,编译器可以对代码做如下优化:
一、栈上分配:将堆分配转化为栈分配。如果一个对象在子程序中被分配,要使指向该对象的指针永远不会发生逃逸,对象可能是栈上分配的候选,而不是堆上分配
二、同步省略:如果一个对象被发现只有一个线程被访问到,那么对于这个对象的操作可以不考虑同步。
三、标量替换(分离对象):有的对象可能不需要作为一个连续的内存结构存在也可以被访问到,那么对象的部分(或全部)可以不存储在内存,而是存储在CPU寄存器中。
6.10.3.1栈上分配
==JIT编译器在编译期间根据逃逸分析的结果,发现如果一个对象并没有逃逸出方法的话,就可能被优化成栈上分配。==分配完成后,继续在调用栈内执行,最后线程结束,栈空间被回收,局部变量对象也被回收。这样就无须进行垃圾回收了。
常见的栈上分配的场景
在逃逸分析中,已经说明了。分别是给成员变量赋值、方法返回值、实例引用传递。
案例:
- 查看创建对象数量
设置堆内存大小为1GB,不做逃逸分析,打印GC的详细信息
可以看出在堆内存当中就是存在1000000个User对象。
开启逃逸分析后查看
此时就没有产生1000000个对象,花费时间更少。
- 查询GC的执行情况
设置堆内存大小为256m,不做逃逸分析,打印GC的详细信息
可以看到当堆内存太小时,在不进行逃逸分析的情况下,就会在年轻代就是触发Yonug GC。
开启逃逸分析后查看
没有进行GC
6.10.2.2同步省略
线程同步的代价是相当高的,同步的后果是降低并发性和性能。
==在动态编译同步块的时候,JIT编译器可以借助逃逸分析来判断同步代码块所使用的锁对象是否只能够被一个线程访问而没有被发布到其他线程(即此对象只在该方法中被引用)。==如果没有,那么JIT编译器在编译这个同步块的时候就会取消对这部分代码的同步。这样就能大大提高并发性和性能。这个取消同步的过程就叫同步省略,也叫锁消除。
举例
代码中对hellis这个对象加锁,但是hellis对象的生命周期只在f()方法中,并不会被其他线程所访问到,所以在JIT编译阶段就会被优化掉,优化成:
6.10.2.3标量替换(对象分离)
==标量(scalar)是指一个无法再分解成更小的数据的数据。==Java中的原始数据类型就是标量。
相对的,那些还可以分解的数据叫做聚合量(Aggregate)
,Java中的对象就是聚合量,因为他可以分解成其他聚合量和标量。
在JIT阶段,如果经过逃逸分析,发现一个对象不会被外界引用的话,那么经过JIT优化,就会把这个对象拆解成若干个包含的若干个成员变量来代替。这个过程就是标量替换。
举例
以上代码,经过标量替换后,就会变成
可以看到,Point这个聚合量经过逃逸分析后,发现他并没有逃逸,就被替换成两个标量了。==那么标量替换有什么好处呢?就是可以大大减少堆内存的占用。因为一旦不需要创建对象了,那么就不再需要分配堆内存了。 标量替换为栈上分配提供了很好的基础。==
标量替换参数设置
参数-XX:EliminateAllocations
:开启了标量替换(默认打开),允许将对象打散分配到栈上。
上述代码在主函数中进行了1亿次alloc。调用进行对象创建,由于User对象实例需要占据约16字节的空间,因此累计分配空间达到将近1.5GB。如果堆空间小于这个值,就必然会发生GC。使用如下参数运行上述代码:
这里设置参数如下:
参数
-server
:启动Server模式,因为在server模式下,才可以启用逃逸分析。参数
-XX:+DoEscapeAnalysis
:启用逃逸分析参数
-Xmx10m
:指定了堆空间最大为10MB参数
-XX:+PrintGC
:将打印Gc日志参数
-XX:+EliminateAllocations
:开启了标量替换(默认打开),允许将对象打散分配在栈上,比如对象拥有id和name两个字段,那么这两个字段将会被视为两个独立的局部变量进行分配
6.X.3. 逃逸分析小结:逃逸分析并不成熟
关于逃逸分析的论文在1999年就已经发表了,但直到JDK1.6才有实现,而且这项技术到如今也并不是十分成熟。
其根本原因就是无法保证逃逸分析的性能消耗一定能高于他的消耗。虽然经过逃逸分析可以做标量替换、栈上分配、和锁消除。但是逃逸分析自身也是需要进行一系列复杂的分析的,这其实也是一个相对耗时的过程。
一个极端的例子,就是经过逃逸分析之后,发现没有一个对象是不逃逸的。那这个逃逸分析的过程就白白浪费掉了。
虽然这项技术并不十分成熟,但是它也是即时编译器优化技术中一个十分重要的手段。
注意到有一些观点,认为通过逃逸分析,JVM会在栈上分配那些不会逃逸的对象,这在理论上是可行的,但是取决于JVM设计者的选择。据我所知,Oracle Hotspot JVM中并未这么做,这一点在逃逸分析相关的文档里已经说明,所以可以明确所有的对象实例都是创建在堆上。
目前很多书籍还是基于JDK7以前的版本,JDK已经发生了很大变化,intern字符串的缓存和静态变量曾经都被分配在永久代上,而永久代已经被元数据区取代。但是,intern字符串缓存和静态变量并不是被转移到元数据区,而是直接在堆上分配,所以这一点同样符合前面一点的结论:对象实例都是分配在堆上。
6.11.本章小结
==年轻代是对象的诞生、成长、消亡的区域,一个对象在这里产生、应用,最后被垃圾回收器收集、结束生命。==
老年代放置长生命周期的对象,通常都是从survivor
区域筛选拷贝过来的Java对象。当然,也有特殊情况,我们知道普通的对象会被分配在TLAB(线程分配缓冲区)上;如果对象较大,JVM会试图直接分配在Eden其他位置上;如果对象太大,完全无法在年轻代找到足够长的连续空闲空间,JVM就会直接分配到老年代。==当GC只发生在年轻代中,回收年轻代对象的行为被称为MinorGc
。==
当GC发生在老年代时则被称为MajorGc
或者FullGC
。一般的,MinorGc
的发生频率要比MajorGC高很多,即老年代中垃圾回收发生的频率将大大低于年轻代。