个人中心
文章发布
退出
作者热门文章
- ubuntu12.04环境下使用kvm ioctl接口实现最简单的虚拟机
- Ubuntu 通过无线网络安装Ubuntu Server启动系统后连接无线网络的方法
- 在Ubuntu上搭建网桥的方法
- ubuntu 虚拟机上网方式及相关配置详解
25
4
CFSDN坚持开源创造价值，我们致力于搭建一个资源共享平台，让每一个IT人在这里找到属于你的精彩世界.
这篇CFSDN的博客文章记一次tomcat进程cpu占用过高的问题排查记录由作者收集整理，如果你对这篇文章有兴趣，记得点赞哟.
本文主要记录一次tomcat进程，因TCP连接过多导致CPU占用过高的问题排查记录.
问题描述 。
linux系统下，一个tomcat web服务的cpu占用率非常高，top显示结果超过200%。请求无法响应。反复重启依然同一个现象.
问题排查 。
1、获取进程信息 。
通过jdk提供的jps命令可以快速查出jvm进程， 。
|
1
|
jps pid
|
2、查看jstack信息 。
|
1
|
jstack pid
|
发现存在大量log4j线程block，处于waiting lock状态 。
org.apache.log4j.Category.callAppenders(org.apache.log4j.spi.LoggingEvent) @bci=12, line=201 (Compiled frame) 。
搜索相关信息，发现log4j 1.x版本存在死锁问题.
发现问题，于是调整log4j配置，仅打开error级别日志，重启tomcat。此时stack中block线程消失，但进程cpu占用率依然高涨.
3、进一步排查 。
分析每个线程的cpu占用量，此处需要引入一个大神贡献的脚本，计算java进程中，每个线程的cpu使用量.
|
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
|
#!/bin/bash
typeset
top
=${1:-10}
typeset pid=${2:-$(pgrep -u $USER java)}
typeset tmp_file=
/tmp/java_
${pid}_$$.trace
$JAVA_HOME
/bin/jstack
$pid > $tmp_file
ps
H -eo user,pid,ppid,tid,
time
,%cpu --
sort
=%cpu --no-headers\
|
tail
-$
top
\
|
awk
-
v
"pid=$pid"
'$2==pid{print $4"\t"$6}'
\
|
while
read
line;
do
typeset nid=$(
echo
"$line"
|
awk
'{printf("0x%x",$1)}'
)
typeset cpu=$(
echo
"$line"
|
awk
'{print $2}'
)
awk
-
v
"cpu=$cpu"
'/nid='
"$nid"
'/,/^$/{print $0"\t"(isF++?"":"cpu="cpu"%");}'
$tmp_file
done
rm
-f $tmp_file
|
脚本适用范围 。
因为ps中的%CPU数据统计来自于/proc/stat，这个份数据并非实时的，而是取决于OS对其更新的频率，一般为1S。所以你看到的数据统计会和jstack出来的信息不一致也就是这个原因～但这份信息对持续LOAD由少数几个线程导致的问题排查还是非常给力的，因为这些固定少数几个线程会持续消耗CPU的资源，即使存在时间差，反正也都是这几个线程所导致.
除了这个脚本，简单点儿的方法则是，查出进程id后，通过如下命令查看该进程中每个线程的资源使用情况 。
|
1
|
top
-H -p pid
|
从这里获取pid（线程id），转换为16进制，然后去stack信息中查找对象的线程信息.
通过上述方法，查出tomcat进程对应的线程cpu占用率累积之和约80%，远小于top给出的200%+ 。
说明并不存在长期占用cpu的线程，应该是属于有许多短暂性的cpu密集计算。进而怀疑是不是jvm内存不足，频繁gc导致.
|
1
|
jstat -gc pid
|
发现jvm内存使用并未出现异常，gc次数明显暴涨 。
查完内存，由于本身是一个网络程序，进一步排查网络连接.
4、问题定位 。
查询tomcat对应端口的tcp链接，发现存在大量EASTABLISH的链接，还有部分其它状态的连接，总计400+.
|
1
|
netstat
-anp |
grep
port
|
进一步查看这些连接的来源，发现是该tomcat服务的应用端，存在大量后台线程，在频繁轮询该服务，导致该服务tomcat 连接数被打满，无法继续接收请求.
netstat状态说明:
5、根源分析 。
直接触发原因是客户端轮询，请求异常，继续轮序；客户端不断有新的后台线程加入轮询队伍，最终导致服务端tomcat连接被打满.
到此这篇关于记一次tomcat进程cpu占用过高的问题排查记录的文章就介绍到这了,更多相关tomcat进程cpu占用过高内容请搜索我以前的文章或继续浏览下面的相关文章希望大家以后多多支持我！ 。
原文链接：https://blog.csdn.net/yiduyangyi/article/details/77101459 。
最后此篇关于记一次tomcat进程cpu占用过高的问题排查记录的文章就讲到这里了,如果你想了解更多关于记一次tomcat进程cpu占用过高的问题排查记录的内容请搜索CFSDN的文章或继续浏览相关文章，希望大家以后支持我的博客！ 。
25
4
0
我正在阅读 SQL/92(我是新手)，它经历了不同的数据类型。其中之一是CHAR，我当然知道它与java中的String非常相似，而不是java中的char。但我们假设它是 CHAR(1)。只有一个字
我的 mysqld 进程消耗了 232% 的 CPU，并且有 14000 多个连接 (我对这件事有点陌生，但关注 Stack Overflow 寻求帮助)。 顶部: PID USER P
Tomcat 服务器占用 100% 的 CPU，但仅在 PRD。我们无法在其他环境中重现这一点。 进行线程转储后，我们发现有一些线程处于等待/可运行状态，但无法找到我们如何找到根本原因。 你能帮忙吗？
我正在使用 Xcode、SpriteKit 和 Swift 构建我的第一款 iPhone 游戏。我对这些技术不熟悉，但我熟悉一般的编程概念。 这是我想用英语做的事情。我想让圆圈随机出现在屏幕上，然后开
我的套接字消耗了 100% 的计算机 CPU。有 150 个客户端每 30 秒异步向服务器发送消息。有谁知道如何解决这个问题？下面是我的 ServerSocket 类 public class Ser
一段时间后(有时几分钟，有时几天)，我的应用开始消耗 100% 的 CPU。正如我从 VisualVM 看到的那样，它总是发生在 org.elasticsearch.common.netty.chan
在我的容器 Controller 中，用户可以平移 View 以切换到不同的 View 。当平移手势开始时，它会将新 View Controller 的 View 添加到 View 中:view.in
假设我在数据框中有两列，其中一列不完整。 df = pd.DataFrame({'a': [1, 2, 3, 4], 'b':[5, '', 6, '']}) df Out: a b
在Ubuntu 16.04 LTS中，pyteserract脚本吃得太高，导致系统间歇性重启。 top命令输出为 top - 21:23:31 up 27 min, 4 users, lo
我在具有 88 个内核和 60 个 reducer 的 hadoop 集群上运行 mapreduce 作业。由于某种原因，它只使用了 79 个集群核心。开始时它运行 79 个映射器，但当完成一半拆分时
我正在对机器上的所有用户进行查询，当它执行时，它会占用 100% 的 CPU 并锁定系统。我已经等了 5 分钟，但什么也没有发生。 在任务管理器中，wmiprvse.exe 占用了所有 CPU。当我终
我正在从套接字(通过 TCP 协议(protocol))读取消息，但我注意到 CPU 花费大量时间来调用 BufferedInputStream 的 available() 方法。这是我的代码:
我有 6 个线程。其中一个线程进入某个范围并打开“锁定”和所有其他线程线程正在等待并希望进入相同的范围。 现在，其他线程是否会获得 CPU 时间？其他线程是否在线程调度中？我知道所有其他线程都处于等待
我正在尝试创建一个社交媒体应用程序。但它需要大约 300mb 内存。所以我的主页上有 5 个包含帖子的 fragment 。总体内存使用量为 250-300mb 然后为了测试，我禁用了这些 fragm
我有一个带有一些 TextFormField 的表单，我想扩展最后一个 TextFormField 以占据屏幕的其余部分。最后一个 TextFormField 可以有多行文本。 我没能做到这一点，并尝
我收到磁盘几乎已满的警告，所以我运行 DaisyDisk .. 显然 Xcode 占用了 15GB 的空间: http://imgur.com/a/cTIZZ iOS 设备支持为 12.3 GB: h
我正在使用 Xcode Playground 研究 Swift 内存布局，我创建了一个带有 bool、double 和 int32 的结构，如下所示。基于这种结构，MemoryLayout 的打印结果
一旦执行“self.navigationController pushviewcontroller:vc animated:YES”，我的 CPU 就会达到 100%。我在 Stack Overflo
警告:CPU 使用率达到 100%，请小心。 Link to the jsFiddle 编写此脚本是为了设计动态蛇梯板。每次刷新页面时，都会创建一个新板。大多数时候所有的背景图像都不会出现，CPU 使
我不知道为什么，但是MYSQL给CPU带来了很大的负载。我必须每秒多次更新数据库，并且用户群正在不断增长。 一开始还好，但是现在 CPU 负载每天都在增加 这是日志中的慢速查询: *Query_tim
我是一名优秀的程序员,十分优秀！