--- id: 1a67c65c-547c-3c19-845a-21ed6b7f4fe7 title: 服务器 CPU 飙升排查思路 tags: '' publish_date: '2026-09-18 15:10:08' last_modify_date: '2026-09-18 19:15:07' sha256: dc6e592bf79fa5f02f08435bec5b47cf4ef170b10cc04afb37458172de5928de --- # 服务器 CPU 飙升排查思路 ### 问题描述 + tradeorder/repayengine 消息发送限流：RateLimiter 死循环获取限流器导致CPU自旋（2019年11月，绍兴马拉松） ### 问题解析 ![](https://cdn.nlark.com/yuque/0/2020/png/2638049/1602038893933-8b5fc62f-d11d-4a45-8bec-1ac30d685a7f.png) ### 解决方法 ![](https://cdn.nlark.com/yuque/0/2020/png/2638049/1602038907105-eb6ecd88-ad07-468d-b55c-d04f8c6d7c16.png) + 定位资源瓶颈：top、vmstat、tsar(历史) - 中断：/proc/softirqs、/proc/interrupts - I/O：iostat、dstat + 定位热点进程： - 上下文切换：pidstat -w - CPU：pidstat -u - I/O：iotop、pidstat -d - 僵尸进程：ps + 线程&进程内部分析： - 上下文切换：pidstat -w -p [pid] - CPU：pidstat -u -p [pid] - I/O: lsof + 热点事件&方法分析：用trace或者dump工具，将线程反向关联，将问题范围定位到具体方法&堆栈 - perf：Linux性能分析工具，支持针对处理器相关性能指标与操作系统相关性能指标的性能剖析 - hotmethod： - jstack： * 结合ps -Lp或者pidstat -p一起使用，可初步定位热点线程。 * 结合zprofile-threaddump一起使用，可统计线程分布、等锁情况，常用与线程数增加分析。 - strace：跟踪进程执行时的系统调用和所接收的信号。 - tcpdump：抓包分析，常用于网络I/O瓶颈定位。 ### 参考 - [https://mp.weixin.qq.com/s/fzLcAkYwKhj-9hgoVkTzaw](https://mp.weixin.qq.com/s/fzLcAkYwKhj-9hgoVkTzaw) 阿里技术微信公众号