java - 调整 G1GC 参数以进行积极的垃圾收集？

Question

我的 JVM 基本上是一个 spark 执行器，它一个接一个地运行任务。任务需要大量内存，并且在其生命周期内需要大量内存。

JConsole and JVisualVM report side by side

上面的 JVM 使用默认参数在 G1GC 上运行。正如您在下午 4:25 到 4:32 之间右侧的 VisualVM 报告中看到的那样，尖峰是由于执行程序运行的每个任务(本质上，每个尖峰都是由于执行程序在上一个已经结束了)。当我在 4:35 触发手动 GC 时，我看到堆使用率急剧下降。此外，正如您在 JConsole 报告左侧看到的那样，G1GC 从未收集过老年代空间(16:35 之前老年代空间的急剧下降是由于手动 GC 造成的)。

因为我的应用程序是一个 spark 批处理作业应用程序，所以如果 JVM 花费大量时间进行 GC，我就可以了。但是，我的内存力有点不足。所以，我想知道如何调整我的 JVM G1GC 参数，以便有更频繁的 GC(旧的 gen 空间也被收集)并且我可以用更少的堆空间 (XMX) 完成工作。

Answer 1

对于 G1，及时将未使用的内存返回给操作系统是 OpenJDK 12 的一项功能:

• JEP 346: Promptly Return Unused Committed Memory from G1 (tracking issue)

如果您的内存不足，您可能需要控制 RSS(从操作系统分配的总内存)，而不仅仅是 Java 堆中已用的内存。对于当前 OpenJDK 中的 G1，(半)手动触发的完整 GC 似乎是触发 RSS 减少的唯一方法。 (如果你改变 full GC 频繁发生的人体工程学，G1 将表现不佳。)

如果您的 OpenJDK 构建包含 Shenondoah collector ，如果您需要节省内存，尤其是进行一些调整时，它可能是更好的选择，例如使用 -XX:ShenandoahGCHeuristics=compact。

ZGC最终也应该支持返回内存，但是it currently does not ; patch adding an -XX:+ZReleaseUnusedHeap option尚未合并。