Linux系统中负载高问题排查思路与解决方法
Load 是对计算机干活多少的度量，Load Average 是一段时间（1分钟、5分钟、15分钟）内平均Load。
一、Load分析：
情况1：CPU高、Load高
- 通过top命令查找占用CPU最高的进程PID；
- 通过top -Hp PID查找占用CPU最高的线程TID;
- 对于java程序，使用jstack打印线程堆栈信息（可联系业务进行排查定位）；
- 通过
printf %x tid打印出最消耗CPU线程的十六进制； - 在堆栈信息中查看该线程的堆栈信息；
情况2：CPU低、Load高
-
通过top命令查看CPU等待IO时间，即
%wa； -
通过
iostat -d -x -m 1 10查看磁盘IO情况；(安装命令yum install -y sysstat) -
通过
sar -n DEV 1 10查看网络IO情况；文章来源：https://www.toymoban.com/news/detail-571116.html -
通过如下命令查找占用IO的程序；
ps -e -L h o state,cmd | awk '{if($1=="R"||$1=="D"){print $0}}' | sort | uniq -c | sort -k 1nr
二、CPU高、Load高情况分析
- 使用
vmstat查看系统的 CPU 负载； - 使用
top查看进程的 CPU 负载；
2.1、使用 vmstat 查看系统的 CPU 负载
可以通过 vmstat 从系统查看 CPU 资源的使用情况
格式：vmstat -n 1 -n 1 表示结果一秒刷新一次
[root@k8s-10 ~]# vmstat -n 1
procs -----------memory---------- ---swap-- -----io---- -system-- ------cpu-----
r b swpd free buff cache si so bi bo in cs us sy id wa st
1 1 0 2798000 2076 6375040 0 0 10 76 10 49 6 2 91 1 0
0 0 0 2798232 2076 6375128 0 0 0 207 7965 12525 7 2 90 2 0
返回结果中的主要数据列说明：
- r： 表示系统中 CPU 等待处理的线程。由于 CPU 每次只能处理一个线程，所以，该数值越大，通常表示系统运行越慢。
- b： 表示阻塞的进程
- us： 用户CPU时间
- sy： 系统CPU时间，如果太高，表示系统调用时间长，例如是IO操作频繁。
- wa：IO 等待消耗的 CPU 时间百分比。该值较高时，说明 IO 等待比较严重，这可能磁盘大量作随机访问造成的，也可能是磁盘性能出现了瓶颈。
- id：处于空闲状态的 CPU 时间百分比。如果该值持续为 0，同时 sy 是 us 的两倍，则通常说明系统则面临着 CPU 资源的短缺。
2.1、使用 top 查看进程的 CPU 负载
通过 top 从进程纬度来查看其 CPU、内存等资源的使用情况。
可以直接在界面输入大小字母 P，按 CPU 使用率倒序排列，定位系统中占用 CPU 较高的进程。
输入大写字母M，按 Memory使用率倒序排列，定位系统中占用 Memory 较高的进程。
三、CPU低、Load高情况分析
load average 是对 CPU 负载的评估，其值越高，说明其任务队列越长，处于等待执行的任务越多。出现此种情况时，可能是由于僵死进程导致的。可以通过指令ps -axjf查看是否存在 D 状态进程。
D 状态是指不可中断的睡眠状态。该状态的进程无法被 kill，也无法自行退出。只能通过恢复其依赖的资源或者重启系统来解决。
# 等待I/O的进程通过处于uninterruptible sleep或D状态；通过给出这些信息我们就可以简单的查找出处在wait状态的进程
ps -eo state,pid,cmd | grep "^D"; echo "----"
# 查找占用IO的程序
ps -e -L h o state,cmd | awk '{if($1=="R"||$1=="D"){print $0}}' | sort | uniq -c | sort -k 1nr
通过iostat -d -x -m 1 10查看磁盘IO情况；(安装命令 yum install -y sysstat)
通过sar -n DEV 1 10查看网络IO情况；
通过如下命令查看TCP连接状态文章来源地址https://www.toymoban.com/news/detail-571116.html
netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}'
netstat -n | grep CLOSE_WAIT
到了这里，关于Linux系统中负载高问题排查思路与解决方法的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！
