- mongodb - 在 MongoDB mapreduce 中,如何展平值对象?
- javascript - 对象传播与 Object.assign
- html - 输入类型 ="submit"Vs 按钮标签它们可以互换吗?
- sql - 使用 MongoDB 而不是 MS SQL Server 的优缺点
我们的 Java EE 应用程序已经开始出现一些严重的问题。具体来说,应用程序在启动后几分钟内运行了高达 99% 的老年代堆。没有抛出 OOM,但实际上 JVM 没有响应。 jstat 显示老年代的大小根本没有减少,没有进行垃圾收集,并且 kill -3 说:
Heap
PSYoungGen total 682688K, used 506415K [0xc1840000, 0xf3840000, 0xf3840000)
eden space 546176K, 92% used [0xc1840000,0xe06cd020,0xe2da0000)
from space 136512K, 0% used [0xe2da0000,0xe2da0000,0xeb2f0000)
to space 136512K, 0% used [0xeb2f0000,0xeb2f0000,0xf3840000)
PSOldGen total 1536000K, used 1535999K [0x63c40000, 0xc1840000, 0xc1840000)
object space 1536000K, 99% used [0x63c40000,0xc183fff8,0xc1840000)
虚拟机选项是:
-Xmx2300m -Xms2300m -XX:NewSize=800m -XX:MaxNewSize=800m -XX:SurvivorRatio=4 -XX:PermSize=256m -XX:MaxPermSize=256m -XX:+UseParallelGC -XX:ParallelGCThreads=4
(我将其从 2300m 堆/1800m 新生成更改为尝试解决问题)
一旦 JVM 进入“内存不足”状态(一直持续),我对其进行了堆转储并在其上运行 Eclipse 内存分析器。
结果很有趣。大约 200Mb 被各种对象占用(有些比其他对象拥有更多),但其余的 1.9Gb 都无法访问(可能值得注意的是,大部分被 GSON 对象占用,但我认为不是任何事情的指示,只是说我们在服务器操作期间搅动了很多 GSON 对象)。
任何解释为什么 VM 有这么多无法访问的对象,并且根本无法收集它们?
JVM:
$ /0/bin/java -version
java version "1.6.0_37"
Java(TM) SE Runtime Environment (build 1.6.0_37-b06)
Java HotSpot(TM) Server VM (build 20.12-b01, mixed mode)
当系统进入这个停顿状态时,详细的 GC 会继续打印以下内容:
922.485: [GC [1 CMS-initial-mark: 511999K(512000K)] 1952308K(2048000K), 3.9069700 secs] [Times: user=3.91 sys=0.00, real=3.91 secs]
926.392: [CMS-concurrent-mark-start]
927.401: [Full GC 927.401: [CMS927.779: [CMS-concurrent-mark: 1.215/1.386 secs] [Times: user=5.84 sys=0.13, real=1.38 secs] (concurrent mode failure): 511999K->511999K(512000K), 9.4827600 secs] 2047999K->1957315K(2048000K), [CMS Perm : 115315K->115301K(262144K)], 9.4829860 secs] [Times: user=9.78 sys=0.01, real=9.49 secs]
937.746: [Full GC 937.746: [CMS: 512000K->511999K(512000K), 8.8891390 secs] 2047999K->1962252K(2048000K), [CMS Perm : 115302K->115302K(262144K)], 8.8893810 secs] [Times: user=8.89 sys=0.01, real=8.89 secs]
已解决
正如 Paul Bellora 所建议的,这是由于在 JVM 中创建的对象数量过多,在太短的时间内创建的。此时调试变得相当乏味。我最终做的是,使用自定义 JVM 代理来检测类。仪器将计算方法和构造函数调用。然后检查计数。我发现一个不起眼的单个操作会创建大约 200 万个对象,并触发某些单独的方法大约 150 万次(不,没有循环)。与其他操作相比,操作本身很慢。您也可以使用任何热点分析器(例如 visualVM),但我遇到了各种各样的麻烦,所以最终编写了自己的。
我仍然认为 JVM 的行为是一个谜。看起来垃圾收集器停滞不前,不再清理内存,但内存分配器希望它这样做(因此不会引发 OOM)。相反,我本以为它会清除所有无法访问的内存。但是应用程序的行为也不会好很多,因为无论如何大部分时间都会花在垃圾收集上。
我用来寻求帮助的代理可以在这里找到:https://github.com/veselov/MethodCountAgent .它远不是一款完美的软件。
最佳答案
Any explanation as to why the VM is having so many unreachable objects, and is uncapable of collecting them at all?
(基于我们在评论中的交流)听起来这不是传统的内存泄漏,而是一些逻辑不断向新对象发送垃圾邮件,使得 GC 难以跟上当前架构。
罪魁祸首可能是某些 API 请求被多次发出,或者被“卡”在某种错误状态,例如我描述的无限分页场景。这两种情况都归结为数百万个响应 gson 对象(指向 String
s(指向 char[]
s))被实例化,然后符合 GC 条件.
正如我所说,您应该尝试隔离问题请求,然后进行调试并进行测量以确定这是您的应用程序或其库之一的错误或可伸缩性问题。
关于Java 堆被无法访问的对象淹没,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/14370738/
我通过 spring ioc 编写了一些 Rest 应用程序。但我无法解决这个问题。这是我的异常(exception): org.springframework.beans.factory.BeanC
我对 TestNG、Spring 框架等完全陌生,我正在尝试使用注释 @Value通过 @Configuration 访问配置文件注释。 我在这里想要实现的目标是让控制台从配置文件中写出“hi”,通过
为此工作了几个小时。我完全被难住了。 这是 CS113 的实验室。 如果用户在程序(二进制计算器)结束时选择继续,我们需要使用 goto 语句来到达程序的顶部。 但是,我们还需要释放所有分配的内存。
我正在尝试使用 ffmpeg 库构建一个小的 C 程序。但是我什至无法使用 avformat_open_input() 打开音频文件设置检查错误代码的函数后,我得到以下输出: Error code:
使用 Spring Initializer 创建一个简单的 Spring boot。我只在可用选项下选择 DevTools。 创建项目后,无需对其进行任何更改,即可正常运行程序。 现在,当我尝试在项目
所以我只是在 Mac OS X 中通过 brew 安装了 qt。但是它无法链接它。当我尝试运行 brew link qt 或 brew link --overwrite qt 我得到以下信息: ton
我在提交和 pull 时遇到了问题:在提交的 IDE 中,我看到: warning not all local changes may be shown due to an error: unable
我跑 man gcc | grep "-L" 我明白了 Usage: grep [OPTION]... PATTERN [FILE]... Try `grep --help' for more inf
我有一段代码,旨在接收任何 URL 并将其从网络上撕下来。到目前为止,它运行良好,直到有人给了它这个 URL: http://www.aspensurgical.com/static/images/a
在过去的 5 个小时里,我一直在尝试在我的服务器上设置 WireGuard,但在完成所有设置后,我无法 ping IP 或解析域。 下面是服务器配置 [Interface] Address = 10.
我正在尝试在 GitLab 中 fork 我的一个私有(private)项目,但是当我按下 fork 按钮时,我会收到以下信息: No available namespaces to fork the
我这里遇到了一些问题。我是 node.js 和 Rest API 的新手,但我正在尝试自学。我制作了 REST API,使用 MongoDB 与我的数据库进行通信,我使用 Postman 来测试我的路
下面的代码在控制台中给出以下消息: Uncaught DOMException: Failed to execute 'appendChild' on 'Node': The new child el
我正在尝试调用一个新端点来显示数据,我意识到在上一组有效的数据中,它在数据周围用一对额外的“[]”括号进行控制台,我认为这就是问题是,而新端点不会以我使用数据的方式产生它! 这是 NgFor 失败的原
我正在尝试将我的 Symfony2 应用程序部署到我的 Azure Web 应用程序,但遇到了一些麻烦。 推送到远程时,我在终端中收到以下消息 remote: Updating branch 'mas
Minikube已启动并正在运行,没有任何错误,但是我无法 curl IP。我在这里遵循:https://docs.traefik.io/user-guide/kubernetes/,似乎没有提到关闭
每当我尝试docker组成任何项目时,都会出现以下错误。 我尝试过有和没有sudo 我在这台机器上只有这个问题。我可以在Mac和Amazon WorkSpace上运行相同的容器。 (myslabs)
我正在尝试 pip install stanza 并收到此消息: ERROR: No matching distribution found for torch>=1.3.0 (from stanza
DNS 解析看起来不错,但我无法 ping 我的服务。可能是什么原因? 来自集群中的另一个 Pod: $ ping backend PING backend.default.svc.cluster.l
我正在使用Hibernate 4 + Spring MVC 4当我开始 Apache Tomcat Server 8我收到此错误: Error creating bean with name 'wel
我是一名优秀的程序员,十分优秀!