news 2026/4/18 14:27:10

Linux进程CPU飙高排查手册

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Linux进程CPU飙高排查手册

前言

服务器CPU突然飙到90%以上,告警响个不停。这时候需要快速定位是哪个进程、哪个线程、哪行代码在吃CPU。

这篇整理一套完整的排查流程,从定位进程到找出具体代码行,覆盖Java、Go、Python等常见语言。


一、先看是哪个进程

上去第一件事,top看一眼:

top

输出里重点看这行:

%Cpu(s): 85.2 us, 3.1 sy, 0.0 ni, 10.5 id, 0.0 wa, 0.0 hi, 1.2 si

us高说明是用户程序在吃CPU,wa高说明在等IO。如果us很高,基本就是业务代码的问题。

P排序,罪魁祸首一目了然:

PID USER %CPU %MEM COMMAND 12345 app 156.0 8.2 java -jar app.jar

好家伙,156%,跑满了一个半核心。

二、定位是哪个线程

Java进程里几百个线程呢,得继续缩小范围:

top-H -p12345

-H显示线程级别。果然有个线程98%:

PID USER %CPU COMMAND 12367 app 98.0 java 12368 app 2.3 java

记下这个线程ID:12367

三、定位具体代码

Java的话用jstack:

jstack12345>/tmp/thread.txt

但是jstack里线程ID是16进制的,先转换一下:

printf"%x\n"12367# 304f

然后搜:

grep-A30"nid=0x304f"/tmp/thread.txt

输出:

"worker-1" #23 nid=0x304f runnable at java.util.regex.Pattern$GroupHead.match(Pattern.java:4658) at java.util.regex.Pattern$Loop.match(Pattern.java:4785) at java.util.regex.Pattern$GroupTail.match(Pattern.java:4717) ...(省略一大堆regex相关的栈) at com.example.service.ContentFilter.filter(ContentFilter.java:89)

破案了,正则在疯狂回溯。

四、常见原因与解决

CPU问题基本就那几种:

1)正则回溯

类似这种正则特别危险:

Stringregex="(a+)+b";// 遇到 "aaaaaaaaaaaaaaac" 直接卡死

2)死循环

最傻的bug:

while(list.size()>0){process(list.get(0));// 忘了remove...}

3)频繁Full GC

表现是好几个GC线程都在吃CPU。用这个看:

jstat -gcutil123451000

FGC列如果一直在涨,就是内存泄漏了。

4)锁竞争

top里sy(系统态)高,jstack一看全是BLOCKED状态。

五、一键排查脚本

一个脚本,出问题直接跑,一键收集信息:

#!/bin/bash# cpu_debug.shPID=$1[-z"$PID"]&&echo"用法:$0<pid>"&&exit1DIR="/tmp/cpu_$(date+%H%M%S)"mkdir-p$DIRecho"收集进程$PID信息..."# 线程CPUps-T -p$PID-o tid,%cpu,time --sort=-%cpu|head-20>$DIR/threads.txt# jstackjstack$PID>$DIR/jstack.txt2>/dev/null# 找最忙的线程TOP_TID=$(head-2 $DIR/threads.txt|tail-1|awk'{print $1}')TOP_TID_HEX=$(printf"%x"$TOP_TID)echo"最忙线程:$TOP_TID(0x$TOP_TID_HEX)"grep-A30"nid=0x$TOP_TID_HEX"$DIR/jstack.txtecho"详细信息:$DIR"

用法:./cpu_debug.sh 12345

直接告诉你哪个线程最忙,在执行什么代码。

六、Go程序的排查

Go比较方便,如果开了pprof:

go tool pprof http://localhost:6060/debug/pprof/profile?seconds=30

进去之后top 10看热点函数,list 函数名看具体代码。

不想用命令行的话,加个-http=:8080参数,浏览器看火焰图,更直观。

七、预防措施

建议加个告警:

-alert:HighCPUexpr:100-(avg(irate(node_cpu_seconds_total{mode="idle"}[5m])) * 100)>80for:3m

CPU超过80%持续3分钟就告警。

另外代码里长时间运行的任务最好加个超时,别让一个bug把整个服务拖垮。


总结

CPU排查流程:

1. top/ps 确认哪个进程 ↓ 2. top -H 确认哪个线程 ↓ 3. jstack/pprof/perf 确认哪行代码 ↓ 4. 分析原因(死循环/GC/锁/正则...) ↓ 5. 修复并验证

大多数情况下,问题出在:

  • 业务代码Bug(死循环、正则回溯)
  • 内存问题引发频繁GC
  • 锁竞争严重

掌握这套流程,线上CPU问题基本都能快速定位。


有问题评论区交流。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/17 13:08:07

React Native核心要点:State与Props的正确使用方式

State与Props:React Native里最不该被轻视的“电路接口” 你有没有遇到过这样的场景? 用户在商品页点了三次“加入购物车”,界面上只显示+1; 表单输入框刚打完字,焦点突然丢失、内容清空; Tab切换回来,图片轮播器从第一张重新开始——而用户明明记得自己停在第三张。…

作者头像 李华
网站建设 2026/4/18 6:28:51

阿里小云语音唤醒模型保姆级教程:解决环境依赖问题一步到位

阿里小云语音唤醒模型保姆级教程&#xff1a;解决环境依赖问题一步到位 你是不是也遇到过这样的情况&#xff1a;在 GitHub 上找到一个看起来很酷的语音唤醒模型&#xff0c;兴冲冲 clone 下来&#xff0c;结果卡在第一步——pip install 报错、CUDA 版本冲突、PyTorch 和 Fun…

作者头像 李华
网站建设 2026/4/18 8:45:16

ArduPilot姿态控制算法系统学习路径推荐

ArduPilot姿态控制:从抖动发散到稳如磐石的实战解剖 你有没有遇到过这样的场景? 刚调完 ATC_RAT_PIT_P ,飞机悬停时横滚轴开始低频“呼吸式”晃动; 把 ATC_RAT_YAW_D 加大一点想压住偏航振荡,结果一打方向就“甩头”; GPS信号弱时定点突然漂移,地面站显示EKF健康…

作者头像 李华
网站建设 2026/4/18 12:59:18

从零开始搭建工控开发环境:CubeMX安装详解

从“打不开”到“秒识别”&#xff1a;一个工控老炮儿的STM32CubeMX环境攻坚实录你有没有过这样的经历&#xff1f;——刚下载完最新版 STM32CubeMX&#xff0c;双击图标&#xff0c;黑窗口一闪而过&#xff0c;桌面安静如初&#xff1b;或者启动成功了&#xff0c;但左下角一直…

作者头像 李华
网站建设 2026/4/18 8:53:00

ollama Phi-4-mini-reasoning保姆级教程:从安装到实战推理

ollama Phi-4-mini-reasoning保姆级教程&#xff1a;从安装到实战推理 1. 为什么选Phi-4-mini-reasoning&#xff1f;轻量但不简单 你可能已经用过不少大模型&#xff0c;但有没有遇到过这些情况&#xff1a;想快速验证一个数学思路&#xff0c;结果等了半分钟才出结果&#…

作者头像 李华
网站建设 2026/4/18 8:46:44

从零到一:STM32单片机在智能农业中的实战应用与优化策略

从零到一&#xff1a;STM32单片机在智能农业中的实战应用与优化策略 清晨六点&#xff0c;当第一缕阳光穿透蔬菜大棚的塑料薄膜&#xff0c;STM32F103芯片已经完成了第287次环境数据采集。OLED屏幕上跳动的数字显示&#xff1a;温度23.5℃、湿度65%、光照强度1200Lux——这是番…

作者头像 李华