谈谈线上CPU100%排查套路

Posted open-source-java

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了谈谈线上CPU100%排查套路相关的知识,希望对你有一定的参考价值。

  • 查消耗cpu最高的进程Pid
  • 根据Pid查出消耗cpu最高的线程号
  • 根据线程号查出对应的java线程,进行处理。

准备一行死循环代码

public class TestFor 
    public static void main(String[] args) 
        int random = 0;
        while (random < 100) 
            random = random * 10;
        
    

Linux版

Linux版本,步骤是一模一样的,就是命令换了一下

查消耗Cpu最高的进程PID

执行命令

  • 执行top -c ,显示进程运行信息列表。按下P,进程按照Cpu使用率排序

如下图所示,PID3033的进程耗费Cpu最高
技术图片

根据Pid查出消耗Cpu最高的线程号

执行命令

  • top -Hp 3033 ,显示一个进程的线程运行信息列表。按下P,进程按照Cpu使用率排序

如下图所示,PID3034的线程耗费Cpu最高
技术图片

这是十进制的数据,转成十六进制为0Xbda

根据线程号查出对应的java线程,进行处理

jstack -l 3033 > ./3033.stack

然后执行,grep命令,看线程0xbda做了什么

cat 3033.stack |grep ‘bda‘ -C 8

输出如下
技术图片

至此定位到问题

 

Windows版

可能有人有疑问,我为什么要说Windows版的!因为,我曾经给很多政府部门做过系统。我发现他们用的是Windows Server,不是Linux系统。所有必要说一下!

查消耗Cpu最高的进程PID

手边没有Windows Server机器,我以Win 10为例,截图给大家看一下,先调出PID显示项!
技术图片
然后发现进程PID如下图所示,为10856
技术图片
接下来呢

根据PID查出消耗Cpu最高的线程号

这里用到微软的工具Process Explorer v16.22,地址如下
https://docs.microsoft.com/zh-cn/sysinternals/downloads/process-explorer
如图所示
技术图片

发现最耗Cpu的线程的TID6616
这是十进制的数据,转成十六进制为0x19d8

根据线程号查出对应的java线程,进行处理

执行命令

jstack -l 10856 > c:/10856.stack

打开文件c:/10856.stack,搜索19d8,如下图所示
技术图片

根据文件就可以看出,我们的TestFor.java文件第七行一直在跑,至此定位到问题

参考:https://www.cnblogs.com/rjzheng/p/10315250.html

以上是关于谈谈线上CPU100%排查套路的主要内容,如果未能解决你的问题,请参考以下文章

线上Java程序占用 CPU 过高,请说一下排查方法?

Linux---记录一次线上服务 CPU 100%的排查过程

linux线上CPU100%排查

Java线上故障排查不会怎么办,p8大佬总结的套路清单带你轻松玩转!

JAVA 线上故障排查完整套路,从 CPU磁盘内存网络GC 一条龙!

阿里云K8s容器Pod中Java进程CPU占比100%排查(线上JVM排查之一)