JVM垃圾收集学习总结
1 JVM基本概念
1.1 堆(Heap)
JVM管理的内存叫堆。在32Bit操作系统上有1.5G-2G的限制,而64Bit的就没有。 JVM初始分配的内存由-Xms指定,默认是物理内存的1/64但小于1G。JVM最大分配的内存由-Xmx指定,默认是物理内存的1/4但小于1G。默认空余堆内存小于40%时,JVM就会增大堆直到-Xmx的最大限制,可以由-XX:MinHeapFreeRatio=指定。 默认空余堆内存大于70%时,JVM会减少堆直到-Xms的最小限制,可以由-XX:MaxHeapFreeRatio=指定。服务器一般设置-Xms、-Xmx相等以避免在每次GC 后调整堆的大小。
堆分为三个主要的域:新域、旧域以及永久域。Jvm生成的所有新对象放在新域中。一旦对象经历了一定数量的垃圾收集循环后,便获得使用期并进入旧域。在永久域中jvm则存储class和method对象。
就配置而言,永久域是一个独立域并且不认为是堆的一部分,可使用-Xms和-Xmx 控制整个堆的原始大小或最大值,可使用-XX:NewRatio设置新域在堆中所占的比例下面的命令把整个堆设置成128m,新域比率设置成3,即新域与旧域比例为1:3,新域为堆的1/4或32M,可使用-XX:NewSize和-XX:MaxNewsize设置新域的初始值和最大值,下面的命令把新域的初始值和最大值设置成64m: java -Xms256m -Xmx256m -Xmn64m,永久域默认大小为4m。
运行程序时,jvm会调整永久域的大小以满足需要。每次调整时,jvm会对堆进行一次完全的垃圾收集,使用-XX:MaxPerSize标志来增加永久域搭大小,为了避免调整,可使用-XX:PerSize标志设置初始值,默认状态下,HotSpot在新域中使用复制收集器。
该域一般分为三个部分。第一部分为Eden,用于生成新的对象。另两部分称为救助空间,当Eden充满时,收集器停止应用程序,把所有可到达对象复制到当前的from救助空间,一旦当前的from救助空间充满,收集器则把可到达对象复制到当前的to救助空间。From和to救助空间互换角色。维持活动的对象将在救助空间不断复制,直到它们获得使用期并转入旧域。
使用-XX:SurvivorRatio可控制新域子空间的大小。同NewRation一样,SurvivorRation规定某救助域与Eden空间的比值。比如,以下命令把新域设置成64m,Eden占32m,每个救助域各占16m:java -Xms256m -Xmx256m -Xmn64m -XX:SurvivorRation =2,如前所述,默认状态下,HotSpot对新域使用复制收集器,对旧域使用标记-清除-压缩收集器。
在新域中使用复制收集器有很多意义,因为应用程序生成的大部分对象是短寿命的。理想状态下,所有过渡对象在移出Eden空间时将被收集。如果能够这样的话,并且移出Eden空间的对象是长寿命的,那么理论上可以立即把它们移进旧域,避免在救助空间反复复制。但是,应用程序不能适合这种理想状态,因为它们有一小部分中长寿命的对象。最好是保持这些中长寿命的对象并放在新域中,因为复制小部分的对象总比压缩旧域廉价。为控制新域中对象的复制,可用-XX:TargetSurvivorRatio控制救助空间的比例。该值是一个百分比,默认值是50。当较大的堆栈使用较低的sruvivorratio时,应增加该值到80至90,以更好利用救助空间
为放置所有的复制全部发生以及希望对象从eden扩展到旧域,可以把MaxTenuring Threshold设置成0。设置完成后,实际上就不再使用救助空间了,因此应把SurvivorRatio设成最大值以最大化Eden空间,设置如下:java -XX:MaxTenuringThreshold=0 ?XX:SurvivorRatio=5000
1.2 基本回收算法
1.2.1 引用计数(Reference Counting)
比较古老的回收算法。原理是此对象有一个引用,即增加一个计数,删除一个引用则减少一个计数。垃圾回收时,只用收集计数为0的对象。此算法最致命的是无法处理循环引用的问题。
1.2.2 标记-清除(Mark-Sweep)
此算法执行分两阶段。第一阶段从引用根节点开始标记所有被引用的对象,第二阶段遍历整个堆,把未标记的对象清除。此算法需要暂停整个应用,同时,会产生内存碎片。
1.2.3 复制(Copying)
此算法把内存空间划为两个相等的区域,每次只使用其中一个区域。垃圾回收时,遍历当前使用区域,把正在使用中的对象复制到另外一个区域中。次算法每次只处理正在使用中的对象,因此复制成本比较小,同时复制过去以后还能进行相应的内存整理,不会出现“碎片”问题。当然,此算法的缺点也是很明显的,就是需要两倍内存空间。
1.2.4 标记-整理(Mark-Compact)
此算法结合了“标记-清除”和“复制”两个算法的优点。也是分两阶段,第一阶段从根节点开始标记所有被引用对象,第二阶段遍历整个堆,把清除未标记对象并且把存活对象“压缩”到堆的其中一块,按顺序排放。此算法避免了“标记-清除”的碎片问题,同时也避免了“复制”算法的空间问题。
1.2.5 增量收集(Incremental Collecting)
实施垃圾回收算法,即:在应用进行的同时进行垃圾回收。不知道什么原因JDK5.0中的收集器没有使用这种算法的。
1.2.6 分代(Generational Collecting)
基于对对象生命周期分析后得出的垃圾回收算法。把对象分为年青代、年老代、持久代,对不同生命周期的对象使用不同的算法(上述方式中的一个)进行回收。现在的垃圾回收器(从J2SE1.2开始)都是使用此算法的。
1.3 Java堆中的各代分布
1.3.1 Young(年轻代)
年轻代分三个区。一个Eden区,两个Survivor区。大部分对象在Eden区中生成。当Eden区满时,还存活的对象将被复制到Survivor区(两个中的一个),当这个Survivor区满时,此区的存活对象将被复制到另外一个Survivor区,当这个Survivor去也满了的时候,从第一个Survivor区复制过来的并且此时还存活的对象,将被复制“年老区(Tenured)”。需要注意,Survivor的两个区是对称的,没先后关系,所以同一个区中可能同时存在从Eden复制过来对象,和从前一个Survivor复制过来的对象,而复制到年老区的只有从第一个Survivor去过来的对象。而且,Survivor区总有一个是空的。
1.3.2 Tenured(年老代)
年老代存放从年轻代存活的对象。一般来说年老代存放的都是生命期较长的对象。
1.3.3 Perm(持久代)
用于存放静态文件,如今Java类、方法等。持久代对垃圾回收没有显著影响,但是有些应用可能动态生成或者调用一些class,例如Hibernate等,在这种时候需要设置一个比较大的持久代空间来存放这些运行过程中新增的类。持久代大小通过-XX:MaxPermSize=<N>进行设置。
1.4 GC类型
GC有两种类型:Scavenge GC和Full GC。
1.4.1 Scavenge GC
一般情况下,当新对象生成,并且在Eden申请空间失败时,就好触发Scavenge GC,堆Eden区域进行GC,清除非存活对象,并且把尚且存活的对象移动到Survivor区。然后整理Survivor的两个区。
1.4.2 Full GC
对整个堆进行整理,包括Young、Tenured和Perm。Full GC比Scavenge GC要慢,因此应该尽可能减少Full GC。有如下原因可能导致Full GC:
l Tenured被写满
l Perm域被写满
l System.gc()被显示调用
l 上一次GC之后Heap的各域分配策略动态变化
分代垃圾回收过程演示
1.5 垃圾回收器
目前的收集器主要有三种:串行收集器、并行收集器、并发收集器。
1.5.1 串行收集器
使用单线程处理所有垃圾回收工作,因为无需多线程交互,所以效率比较高。但是,也无法使用多处理器的优势,所以此收集器适合单处理器机器。当然,此收集器也可以用在小数据量(100M左右)情况下的多处理器机器上。可以使用-XX:+UseSerialGC。
1.5.2 并行收集器
对年轻代进行并行垃圾回收,因此可以减少垃圾回收时间。一般在多线程多处理器机器上使用,使用-XX:+UseParallelGC.打开。并行收集器在J2SE5.0第六6更新上引入,在Java SE6.0中进行了增强--可以对年老代进行并行收集。如果年老代不使用并发收集的话,而是使用单线程进行垃圾回收,会制约扩展能力。使用-XX:+UseParallelOldGC打开。
线程数量还可以通过命令行参数指定。在只有一个cpu的主机上,并行收集器的表现不如默认的收集器好,因为并行有额外的消耗(如同步)在一个拥有2个cpu的主机上,Throughput收集器的性能就和默认收集器差不多好了。在多于2个cpu的主机上,减少minor收集的停顿时间是可能的。
使用-XX:ParallelGCThreads=<N>设置并行垃圾回收的线程数。此值可以设置与机器处理器数量相等。
此收集器可以进行如下配置:
l Adaptive Sizing
和并行收集器一起,J2SE平台(V1.4.1以后)一种可用的特性是adaptive sizing(-XX:+UseAdaptiveSizePolicy),通过默认的adaptive sizing,持续统计垃圾收集次数,分配率,和收集后堆中的自由空间.这些统计数据被用来决定改变young generation和tenured generation 的大小,以便最好地适合应用的行为.使用命令行参数-verbose:gc 察看堆的大小.
l AggressiveHeap
-XX:+AggressiveHeap 选项检查机器资源(内存大小,处理器数目),并尝试设置不同的参数以优化长时间运行的,内存分配敏感的任务。这原本是打算给拥有大量内存和大量cpu的机器的,但在j2SE平台,v1.4.1及以后,显示它在4cpu的机器上是有用的。使用此选项,并行收集器(-XX:+UseParallelGC)和adaptive sizing(-XX:+UseAdaptiveSizePolicy)一起使用。在AggressiveHeap可用之前,该机器的物理内存至少有256M,初始堆的大小以用物理内存的大小来计算,并尝试最大利用使用物理内存(算法试图以最大总物理内存为堆的大小)
l 最大垃圾回收暂停
指定垃圾回收时的最长暂停时间,通过-XX:MaxGCPauseMillis=<N>指定。<N>为毫秒。如果指定了此值的话,堆大小和垃圾回收相关参数会进行调整以达到指定值。设定此值可能会减少应用的吞吐量。
l 吞吐量
吞吐量为垃圾回收时间与非垃圾回收时间的比值,通过-XX:GCTimeRatio=<N>来设定,公式为1/(1+N)。例如,-XX:GCTimeRatio=19时,表示5%的时间用于垃圾回收。默认情况为99,即1%的时间用于垃圾回收。
1.5.3 并发收集器
可以保证大部分工作都并发进行(应用不停止),垃圾回收只暂停很少的时间,此收集器适合对响应时间要求比较高的中、大规模应用。使用-XX:+UseConcMarkSweepGC打开。
并发收集器主要减少年老代的暂停时间,他在应用不停止的情况下使用独立的垃圾回收线程,跟踪可达对象。在每个年老代垃圾回收周期中,在收集初期,并发收集器会对整个应用进行简短的暂停,在收集中还会再暂停一次。第二次暂停会比第一次稍长,在此过程中多个线程同时进行垃圾回收工作。
并发收集器使用处理器换来短暂的停顿时间。在一个N个处理器的系统上,并发收集部分使用K/N个可用处理器进行回收,一般情况下1<=K<=N/4。
在只有一个处理器的主机上使用并发收集器,设置为incremental mode模式也可获得较短的停顿时间。
l 浮动垃圾:
由于在应用运行的同时进行垃圾回收,所以有些垃圾可能在垃圾回收进行完成时产生,这样就造成了“Floating Garbage”,这些垃圾需要在下次垃圾回收周期时才能回收掉。所以,并发收集器一般需要20%的预留空间用于这些浮动垃圾。
l 暂停:
并发收集器在一次收集中会暂停应用两次。第一次暂停用来标记可以从根直接到达的存活对象,第一次暂停称为初始化标记。第二次暂停开始于标记结束阶段,寻找由于并发的应用线程在第一阶段被错过的对象,第二次暂停称为重标记。
l Concurrent Mode Failure:
并发收集器在应用运行时进行收集,所以需要保证堆在垃圾回收的这段时间有足够的空间供程序使用,否则,垃圾回收还未完成,堆空间先满了。这种情况下将会发生“并发模式失败”,此时整个应用将会暂停,进行垃圾回收。
l 启动并发收集器:
因为并发收集在应用运行时进行收集,所以必须保证收集完成之前有足够的内存空间供程序使用,否则会出现“Concurrent Mode Failure”。通过设置-XX:CMSInitiatingOccupancyFraction=<N>指定还有多少剩余堆时开始执行并发收集
l Measurements with the Concurrent Collector
以下是使用-verbose:gc with -XX:+PrintGCDetails 的输出。注意并发收集器的输出交错在minor收集之间。在一次并发收集周期内有很多次minor收集。
CMS-initial-mark:表明并发收集的开始
CMS-concurrent-mark:表明并发标记阶段结束
CMS-concurrent-preclean:为重标记阶段(CMS-remark)作准备,可并发执行
CMS-concurrent-sweep:标记并发清除阶段结束
CMS-concurrent-reset:为并发重置阶段,为下一次收集作准备
[GC [1 CMS-initial-mark: 13991K(20288K)] 14103K(22400K), 0.0023781 secs]
[GC [DefNew: 2112K->64K(2112K), 0.0837052 secs] 16103K->15476K(22400K), 0.0838519 secs]
...
[GC [DefNew: 2077K->63K(2112K), 0.0126205 secs] 17552K->15855K(22400K), 0.0127482 secs]
[CMS-concurrent-mark: 0.267/0.374 secs]
[GC [DefNew: 2111K->64K(2112K), 0.0190851 secs] 17903K->16154K(22400K), 0.0191903 secs]
[CMS-concurrent-preclean: 0.044/0.064 secs]
[GC[1 CMS-remark: 16090K(20288K)] 17242K(22400K), 0.0210460 secs]
[GC [DefNew: 2112K->63K(2112K), 0.0716116 secs] 18177K->17382K(22400K), 0.0718204 secs]
[GC [DefNew: 2111K->63K(2112K), 0.0830392 secs] 19363K->18757K(22400K), 0.0832943 secs]
[GC [DefNew: 2111K->0K(2112K), 0.0035190 secs] 17527K->15479K(22400K), 0.0036052 secs]
[CMS-concurrent-sweep: 0.291/0.662 secs]
[GC [DefNew: 2048K->0K(2112K), 0.0013347 secs] 17527K->15479K(27912K), 0.0014231 secs]
[CMS-concurrent-reset: 0.016/0.016 secs]
[GC [DefNew: 2048K->1K(2112K), 0.0013936 secs] 17527K->15479K(27912K), 0.0014814 secs]
初始化标记阶段停顿短于minor收集停顿时间,并发阶段(并发标记,并发预清除,并发清除)的时间可以相对minor收集长,但应用在并发阶段并不停顿。重标记被应用的细节和从上一次minor收集的时间影响。
l Parallel Minor Collection Options with the Concurrent Collector(并发收集器并行minor收集选项)
在多处理器平台,minor收集停顿可以使用UseParNewGC选项降低。如使用UseParNewGC选项,重标记停顿可以通过设置CMSParallelRemarkEnabled降低。
1.6 小结
1.6.1 串行处理器
适用情况:数据量比较小(100M左右);单处理器下并且对响应时间无要求的应用。
缺点:只能用于小型应用
1.6.2 并行处理器
适用情况:“对吞吐量有高要求”,多CPU、对应用响应时间无要求的中、大型应用。举例:后台处理、科学计算。
缺点:应用响应时间可能较长
1.6.3 并发处理器
适用情况:“对响应时间有高要求”,多CPU、对应用响应时间有较高要求的中、大型应用。举例:Web服务器/应用服务器、电信交换、集成开发环境。
2 JVM参数说明
2.1 与JVM内存相关的参数及其说明
3 JVM性能调优
3.1 性能因素
Java应用程序(特别是垃圾收集)有两个性能计量单位:吞吐量(Throughput)与暂停(Pauses)。吞吐量是指在一段较长时间内,没有用于垃圾收集的时间百分比。吞吐量包括用于分配的时间(但用于调整分配速度的时间一般不包括在内)。暂停是应用程序因为垃圾收集而出现的停顿时间。
一些用户还对其他因素较为敏感。例如,占用率(footprint) 是一批工作进程的集合,以页和缓冲行数计量,在物理内存有限或者有很多进程的系统中,占用率可表示扩展性。反应性(Promptness)是对象死去的时间和内存变为可用时的时间差,是分布系统,包括远程方法调用(RMI)中的重要因素。
3.2 测量方法(Measurement)
3.2.1 测试初始条件
在使用其他收集器前,最好先使用默认的收集器。针对你的应用调整堆大小,然后再考虑应用中还有什么需求未符合。根据后者,考虑使用其它收集器的当中一个,命令行属性只需简单写为:
java -Xms<heapsize> -Xmx<heapsize> -XX:+UseConcMarkSweepGC -XX:+PrintGC Details -XX:+PrintGCTimeStamps
然后要根据应用的情况,在测试软件辅助可以下看看有没有JVM的默认值和自动管理做的不够的地方可以调整,如-xmn设Young的大小,-XX:MaxPermSize设持久代大小等。
3.2.2 测试方法
命令行参数-verbose:gc 在垃圾收集时打印信息。请注意-verbose:gc的输出格式在不同J2SE版本可能变化。下面是来自一个大型服务器应用的输出:
[GC 325407K->83000K(776768K), 0.2300771 secs]
[GC 325816K->83372K(776768K), 0.2454258 secs]
[Full GC 267628K->83769K(776768K), 1.8479984 secs]
我们发现有两次minor收集和一次major收集,在箭头前后的数字:
325407K->83000K (在第一行)显示了在收集前后的存活对象的合并大小。 在minor收集之后,这个数量所包含的对象并不要求是存活的,但不能是可回收的,或者因为他们是存活的,或者因为它们处在或引用自tenured generation,
括号中的数字(776768K)(第一行)是总的可用空间,没有计算permanent generation中的空间,它等于总的堆减去一个幸存空间,
minor收集花费了大概四分之一秒的时间。]0.2300771 secs (第一行)
第三行major收集的格式也是类似的,标记-XX:+PrintGCDetails打印收集的额外信息,该标记也会随虚拟机版本变化。下面是带有
-XX:+PrintGCDetails 的输出:
[GC [DefNew: 64575K->959K(64576K), 0.0457646 secs] 196016K->133633K(261184K), 0.0459067 secs]]
显示minor收集覆盖了大约98%的young generation.DefNew: 64575K->959K(64576K) 并且花费了46毫秒的时间。0.0457646 secs整个堆的使用率降低到51%,196016K->133633K(261184K),最终的时间显示收集有一些轻微的附加消耗(在young generation的收集之上)0.0459067 secs
标记 -XX:+PrintGCTimeStamps 将在每次收集开始时打印时间戳
111.042: [GC 111.042: [DefNew: 8128K->8128K(8128K),
0.0000505 secs]111.042: [Tenured: 18154K->2311K(24576K),
0.1290354 secs] 26282K->2311K(32704K), 0.1293306 secs]
收集起始于应用运行后大约111秒,minor收集也在差不多的时间开始。另外,一次major collection的信息从Tenured开始,tenured generation 的使用率降到大约10%。18154K->2311K(24576K)花费了大概0.13秒。
JVM初始分配的内存由-Xms指定,默认是物理内存的1/64;JVM最大分配的内存由 -Xmx指定,默认是物理内存的1/4。默认空余堆内存小于40%时,JVM就会增大堆直到-Xmx的最大限制;空余堆内存大于70%时,JVM会减少堆直到-Xms的最小限制,JVM使用-XX:PermSize设置非堆内存初始值,默认是物理内存的1/64;由XX:MaxPermSize设置最大非堆内存的大小,默认是物理内存的1/4。
3.3 JVM GC调优
3.3.1 堆大小设置
JVM中,最大堆大小有三方面限制:相关操作系统的数据模型(32-bt还是64-bit)限制;系统的可用虚拟内存限制;系统的可用物理内存限制。32位系统下,一般限制在1.5G~2G;64为操作系统对内存无限制。我在Windows Server 20## 系统,3.5G物理内存,JDK5.0下测试,最大可设置为1478m。
典型设置: java -Xmx3550m -Xms3550m -Xmn2g-Xss128k-Xmx3550m:设置JVM最大可用内存为3550M。-Xms3550m:设置JVM促使内存为3550m。此值可以设置与-Xmx相同,以避免每次垃圾回收完成后JVM重新分配内存。-Xmn2g:设置年轻代大小为2G。整个堆大小=年轻代大小 + 年老代大小 + 持久代大小。持久代一般固定大小为64m,所以增大年轻代后,将会减小年老代大小。此值对系统性能影响较大,Sun官方推荐配置为整个堆的3/8。-Xss128k:设置每个线程的堆栈大小。JDK5.0以后每个线程堆栈大小为1M,以前每个线程堆栈大小为256K,根据应用的线程所需内存大小进行调整。在相同物理内存下,减小这个值能生成更多的线程。但是操作系统对一个进程内的线程数还是有限制的,不能无限生成,经验值在3000~5000左右。
java -Xmx3550m -Xms3550m -Xss128k -XX:NewRatio=4 -XX:SurvivorRatio=4 -XX:MaxPermSize=16m -XX:MaxTenuringThreshold=0-XX:NewRatio=4:设置年轻代(包括Eden和两个Survivor区)与年老代的比值(除去持久代)。设置为4,则年轻代与年老代所占比值为1:4,年轻代占整个堆栈的1/5
-XX:SurvivorRatio=4:设置年轻代中Eden区与Survivor区的大小比值。设置为4,则两个Survivor区与一个Eden区的比值为2:4,一个Survivor区占整个年轻代的1/6
-XX:MaxPermSize=16m:设置持久代大小为16m。
-XX:MaxTenuringThreshold=0:设置垃圾最大年龄。如果设置为0的话,则年轻代对象不经过Survivor区,直接进入年老代。对于年老代比较多的应用,可以提高效率。如果将此值设置为一个较大值,则年轻代对象会在Survivor区进行多次复制,这样可以增加对象再年轻代的存活时间,增加在年轻代即被回收的概论。
对于服务器应用的经验法则是:
除非你有停顿的问题,尽量给虚拟机多的内存.默认64M真的太小了。
设置-Xms 和 -Xmx 为一样的值。
因为分配可以并行,请你在增加处理器的时候确保增加内存。
3.3.2 回收器选择
JVM给了三种选择:串行收集器、并行收集器、并发收集器,但是串行收集器只适用于小数据量的情况,所以这里的选择主要针对并行收集器和并发收集器。默认情况下,JDK5.0以前都是使用串行收集器,如果想使用其他收集器需要在启动时加入相应参数。JDK5.0以后,JVM会根据当前系统配置进行判断。
吞吐量优先的并行收集器
当你想提高具有很多处理器的应用的性能时,使用并行收集器。默认的垃圾收集器使用一个线程工作,那么垃圾收集就增加了应用的连续运行时间,并行收集器使用多个线程知行minor收集,因此减少了应用的连续运行时间,典型的情形是应用有着大量的线程分配对象,在这样的应用中,通常需要一个较大的young generation。
如上文所述,并行收集器主要以到达一定的吞吐量为目标,适用于科学技术和后台处理等。
典型配置:
java -Xmx3800m -Xms3800m -Xmn2g -Xss128k -XX:+UseParallelGC -XX:ParallelGCThreads=20
-XX:+UseParallelGC:选择垃圾收集器为并行收集器。此配置仅对年轻代有效。即上述配置下,年轻代使用并发收集,而年老代仍旧使用串行收集。
-XX:ParallelGCThreads=20:配置并行收集器的线程数,即:同时多少个线程一起进行垃圾回收。此值最好配置与处理器数目相等。
java -Xmx3550m -Xms3550m -Xmn2g -Xss128k -XX:+UseParallelGC -XX:ParallelGCThreads=20 -XX:+UseParallelOldGC
-XX:+UseParallelOldGC:配置年老代垃圾收集方式为并行收集。JDK6.0支持对年老代并行收集。
java -Xmx3550m -Xms3550m -Xmn2g -Xss128k -XX:+UseParallelGC -XX:MaxGCPauseMillis=100
-XX:MaxGCPauseMillis=100:设置每次年轻代垃圾回收的最长时间,如果无法满足此时间,JVM会自动调整年轻代大小,以满足此值。
java -Xmx3550m -Xms3550m -Xmn2g -Xss128k -XX:+UseParallelGC -XX:MaxGCPauseMillis=100 -XX:+UseAdaptiveSizePolicy
-XX:+UseAdaptiveSizePolicy:设置此选项后,并行收集器会自动选择年轻代区大小和相应的Survivor区比例,以达到目标系统规定的最低相应时间或者收集频率等,此值建议使用并行收集器时,一直打开。
-XX:AggressiveHeap:选项检查机器资源(内存大小,处理器数目),并尝试设置不同的参数以优化长时间运行的,内存分配敏感的任务。这原本是打算给拥有大量内存和大量cpu的机器的,但在j2SE平台v1.4.1及以后,它显示它在4cpu的机器上是有用的。使用此选项,并行收集器(-XX:+UseParallelGC)和adaptive sizing(-XX:+UseAdaptiveSizePolicy)一起使用,在AggressiveHeap可用之前,该机器的物理内存至少有256M,初始堆的大小以用物理内存的大小来计算,并尝试最大利用使用物理内存(算法试图以最大总物理内存为堆的大小)。
响应时间优先的并发收集器
若应用希望从比较短的垃圾收集停顿时间,在应用运行的时候可以向垃圾收集器提供处理器资源,那么使用并发低停顿收集器。运行在两个以上cpu机器上,拥有相对大量的长期存活数据的应用,就可以从本收集器得益。然而,此收集器应当考虑为任意应用提供低停顿时间的需求。在单处理器上,给tenured generations 以适当大小也可以看到理想的结果。
如上文所述,并发收集器主要是保证系统的响应时间,减少垃圾收集时的停顿时间。适用于应用服务器、电信领域等。
典型配置:
java -Xmx3550m -Xms3550m -Xmn2g -Xss128k -XX:ParallelGCThreads=20 -XX:+UseConcMarkSweepGC -XX:+UseParNewGC
-XX:+UseConcMarkSweepGC:设置年老代为并发收集。测试中配置这个以后,
-XX:NewRatio=4的配置失效了,原因不明。所以,此时年轻代大小最好用-Xmn设置。
-XX:+UseParNewGC:设置年轻代为并行收集。可与CMS收集同时使用。JDK5.0以上,JVM会根据系统配置自行设置,所以无需再设置此值。
java -Xmx3550m -Xms3550m -Xmn2g -Xss128k -XX:+UseConcMarkSweepGC -XX:CMSFullGCsBeforeCompaction=5 -XX:+UseCMSCompactAtFullCollection
-XX: CMSParallelRemarkEnabled:在多处理器平台,minor收集停顿可以使用UseParNewGC选项降低。如使用UseParNewGC选项,重标记停顿可以通过设置CMSParallelRemarkEnabled降低。
-XX:CMSFullGCsBeforeCompaction:由于并发收集器不对内存空间进行压缩、整理,所以运行一段时间以后会产生“碎片”,使得运行效率降低。此值设置运行多少次GC以后对内存空间进行压缩、整理。
-XX:+UseCMSCompactAtFullCollection:打开对年老代的压缩。可能会影响性能,但是可以消除碎片
3.3.3 辅助信息
JVM提供了大量命令行参数,打印信息,供调试使用。主要有以下一些:
-XX:+PrintGC
输出形式:
[GC 118250K->113543K(130112K), 0.0094143 secs] [Full GC 121376K->10414K(130112K), 0.0650971 secs]
-XX:+PrintGCDetails
输出形式:
[GC [DefNew: 8614K->781K(9088K), 0.0123035 secs] 118250K->113543K(130112K), 0.0124633 secs] [GC [DefNew: 8614K->8614K(9088K), 0.0000665 secs][Tenured: 112761K->10414K(121024K), 0.0433488 secs] 121376K->10414K(130112K), 0.0436268 secs]
-XX:+PrintGCTimeStamps -XX:+PrintGC:
PrintGCTimeStamps可与上面两个混合使用
输出形式:
11.851: [GC 98328K->93620K(130112K), 0.0082960 secs]
-XX:+PrintGCApplicationConcurrentTime:打印每次垃圾回收前,程序未中断的执行时间。可与上面混合使用,
输出形式:
Application time: 0.5291524 seconds
-XX:+PrintGCApplicationStoppedTime:打印垃圾回收期间程序暂停的时间。可与上面混合使用,
输出形式:
Total time for which application threads were stopped: 0.0468229 seconds
-XX:PrintHeapAtGC:打印GC前后的详细堆栈信息
输出形式:
34.702: [GC {Heap before gc invocations=7:
def new generation total 55296K, used 52568K [0x1ebd0000, 0x227d0000, 0x227d0000)
eden space 49152K,99% used [0x1ebd0000, 0x21bce430, 0x21bd0000)
from space 6144K,55% used [0x221d0000, 0x22527e10, 0x227d0000)
to space 6144K, 0% used [0x21bd0000, 0x21bd0000, 0x221d0000)
tenured generation total 69632K, used 2696K [0x227d0000, 0x26bd0000, 0x26bd0000)
the space 69632K, 3% used [0x227d0000, 0x22a720f8, 0x22a72200, 0x26bd0000)
compacting perm gen total 8192K, used 2898K [0x26bd0000, 0x273d0000, 0x2abd0000)
the space 8192K,35% used [0x26bd0000, 0x26ea4ba8, 0x26ea4c00, 0x273d0000)
ro space 8192K,66% used [0x2abd0000, 0x2b12bcc0, 0x2b12be00, 0x2b3d0000)
rw space 12288K,46% used [0x2b3d0000, 0x2b972060, 0x2b972200, 0x2bfd0000)
34.735: [DefNew: 52568K->3433K(55296K), 0.0072126 secs] 55264K->6615K(124928K)Heap after gc invocations=8:
def new generation total 55296K, used 3433K [0x1ebd0000, 0x227d0000, 0x227d0000)
eden space 49152K, 0% used [0x1ebd0000, 0x1ebd0000, 0x21bd0000)
from space 6144K,55% used [0x21bd0000, 0x21f2a5e8, 0x221d0000)
to space 6144K, 0% used [0x221d0000, 0x221d0000, 0x227d0000)
tenured generation total 69632K, used 3182K [0x227d0000, 0x26bd0000, 0x26bd0000)
the space 69632K, 4% used [0x227d0000, 0x22aeb958, 0x22aeba00, 0x26bd0000)
compacting perm gen total 8192K, used 2898K [0x26bd0000, 0x273d0000, 0x2abd0000)
the space 8192K,35% used [0x26bd0000, 0x26ea4ba8, 0x26ea4c00, 0x273d0000)
ro space 8192K,66% used [0x2abd0000, 0x2b12bcc0, 0x2b12be00, 0x2b3d0000)
rw space 12288K,46% used [0x2b3d0000, 0x2b972060, 0x2b972200, 0x2bfd0000)
}, 0.0757599 secs]
-Xloggc:filename:与上面几个配合使用,把相关日志信息记录到文件以便分析。
3.3.4 常见配置汇总
l 堆设置
-Xms:初始堆大小
-Xmx:最大堆大小
-XX:NewSize=n:设置年轻代大小
-XX:NewRatio=n:设置年轻代和年老代的比值。如:为3,表示年轻代与年老代比值为1:3,年轻代占整个年轻代年老代和的1/4
-XX:SurvivorRatio=n:年轻代中Eden区与两个Survivor区的比值。注意Survivor区有两个。如:3,表示Eden:Survivor=3:2,一个Survivor区占整个年轻代的1/5
-XX:MaxPermSize=n:设置持久代大小
l 收集器设置
-XX:+UseSerialGC:设置串行收集器
-XX:+UseParallelGC:设置并行收集器
-XX:+UseParalledlOldGC:设置并行年老代收集器
-XX:+UseConcMarkSweepGC:设置并发收集器
l 垃圾回收统计信息
-XX:+PrintGC
-XX:+PrintGCDetails
-XX:+PrintGCTimeStamps
-Xloggc:filename
l 并行收集器设置
-XX:ParallelGCThreads=n:设置并行收集器收集时使用的CPU数。并行收集线程数。
-XX:MaxGCPauseMillis=n:设置并行收集最大暂停时间
-XX:GCTimeRatio=n:设置垃圾回收时间占程序运行时间的百分比。公式为1/(1+n)
l 并发收集器设置
-XX:+CMSIncrementalMode:设置为增量模式。适用于单CPU情况。
-XX:ParallelGCThreads=n:设置并发收集器年轻代收集方式为并行收集时,使用的CPU数。并行收集线程数。
3.3.5 调优总结
l 对于服务器应用的经验法则
首先决定可以提供给虚拟机的总内存,然后根据young generation的大小绘制你自己的性能曲线,找到最好的设置。除非你有停顿的问题,尽量给虚拟机多的内存。默认64M真的太小了。
设置-Xms 和 -Xmx 为一样的值, 设置他们相等就固定了总堆大小
达到总堆大小的一半或少些时,增加 young generation 并不提高性能。
因为分配可以并行,增加处理器的数量时,请确保增加 young generation ,因为分配可以并行。
l 年轻代大小选择
响应时间优先的应用:尽可能设大,直到接近系统的最低响应时间限制(根据实际情况选择)。在此种情况下,年轻代收集发生的频率也是最小的。同时,减少到达年老代的对象。
吞吐量优先的应用:尽可能的设置大,可能到达Gbit的程度。因为对响应时间没有要求,垃圾收集可以并行进行,一般适合8CPU以上的应用。
l 年老代大小选择
响应时间优先的应用:年老代使用并发收集器,所以其大小需要小心设置,一般要考虑并发会话率和会话持续时间等一些参数。如果堆设置小了,可以会造成内存碎片、高回收频率以及应用暂停而使用传统的标记清除方式;如果堆大了,则需要较长的收集时间。最优化的方案,一般需要参考以下数据获得:
1.并发垃圾收集信息
2.持久代并发收集次数
3.传统GC信息
4.花在年轻代和年老代回收上的时间比例
减少年轻代和年老代花费的时间,一般会提高应用的效率
吞吐量优先的应用:一般吞吐量优先的应用都有一个很大的年轻代和一个较小的年老代。原因是,这样可以尽可能回收掉大部分短期对象,减少中期的对象,而年老代尽存放长期存活对象。
l 较小堆引起的碎片问题
因为年老代的并发收集器使用标记、清除算法,所以不会对堆进行压缩。当收集器回收时,他会把相邻的空间进行合并,这样可以分配给较大的对象。但是,当堆空间较小时,运行一段时间以后,就会出现“碎片”,如果并发收集器找不到足够的空间,那么并发收集器将会停止,然后使用传统的标记、清除方式进行回收。如果出现“碎片”,可能需要进行如下配置:
-XX:+UseCMSCompactAtFullCollection:使用并发收集器时,开启对年老代的压缩。
-XX:CMSFullGCsBeforeCompaction=0:上面配置开启的情况下,这里设置多少次Full GC后,对年老代进行压缩
3.4 JAVA内存泄漏
3.4.1 内存泄漏原因
C/C++的泄漏,是对象已不可到达,而内存又没有回收,真正的内存黑洞。而Java的泄漏,则是因为各种原因,对象对应用已经无用,但一直被持有,一直可到达。
总结原因无外乎几方面:
1. 被生命周期极长的集合类不当持有,号称是Java内存泄漏的首因。
这些集合类的生命周期通常极长,而且是一个辅助管理性质的对象,在一个业务事务运行完后,如果没有将某个业务对象主动的从中清除的话,这个集合就会吃越来越多内存,可以用WeakReference,如WeakHashMap,使得它持有的对象不增加对象的引用数。
2. Scope定义不对,这个很简单了,方法的局部变量定义成类的变量,类的静态变量等。
3. 异常时没有加finally{}来释放某些资源,JDBC时代也是很普遍的事情。
4. 另外一些我了解不深的原因,如:Swing里的Listener没有显式remove;内部类持有外部对象的隐式引用;Finalizers造成关联对象没有被及时清空等。
3.4.2 内存泄漏的检测
有不少工具辅助做这个事情的,如果手上一个工具也没有,可以用JDK自带的小工具:
l 看看谁占满了Heap?
用JDK6的jmap可以显示运行程序中对象的类型,个数与所占的大小。先用ps找到进程号,然后jmap -histo pid 显示或 jmap -dump:file=heap_file_name pid 导出heap文件
l 为什么这些对象仍然可以到达?
用jhat(Java Heap Analysis Tool) 分析刚才导出的heap文件。先jhat heap_file_name,然后打开浏览器http://localhost:7000/ 浏览。
4 JVM参数优化建议
4.1 系统JBOSS启动参数建议
针对在Solaris操作系统下的启动选项JAVA_OPTS:主要涉及堆内存参数设置、回收器选择与其参数设置,以及可选的辅助信息参数设置。
SMS选择的回收器是并发低暂停收集器(UseConcMarkSweepGC),具体设置请参考下面内容:
4.1.1 堆内存参数设置
-Xms 1024m
-Xmx 1024m
-XX:MaxNewSize= 256m
-XX:NewSize= 256m
-XX:SurvivorRatio= 16
-XX:MaxTenuringThreshold= 80
4.1.2 回收器选择与参数设置
-XX:+UseConcMarkSweepGC
-XX:+UseParNewGC
-XX:-CMSParallelRemarkEnabled
-XX:CMSInitiatingOccupancyFraction= 60
-XX:+UseCMSCompactAtFullCollection
-XX:CMSFullGCsBeforeCompaction= 10
-XX:+DisableExplicitGC
4.1.3 可选的辅助信息
[-Xloggc:/isimanager/sms/jboss/bin/gc.out]
[ -XX:+PrintGC ]
[-XX:+PrintGCTimeStamps ]
[-XX:+PrintGCDetails ]
[-XX:+PrintHeapAtGC"]