阿里云K8s容器Pod中Java进程CPU占比100%排查(线上JVM排查之一)

Posted 2022-11-29 深度Java

线上Java基于SpringBoot框架的服务一共4个POD节点，其中有一个节点重启之后CPU占比100%。

系统整体基于阿里云K8s部署，接入了阿里云的ARMS监控。

1.发现CPU占比100%的节点 

从上图看出这个pod只有1核，实际上这个pod是部署在node上，node是32核心的。是设置了pod的limit=1。

查看CPU核数

#cat /proc/cpuinfo 

2.到容器里看Java进程CPU占比 

#top一看确实是java 占用CPU100%

 3.分析Java的线程堆栈信息

这一步是确定影响性能的线程在做什么

#top -Hp 7

 #jstack 7

注意jstack只能附加进程，不能附加线程。线程需要过滤。

#jstack 7 &>jstack20220817-2216.txt

导出

其中1723和5455那几个是问题线程，查看其16进制编码

#prin