首先我们先来看下什么是系统负载。系统负载(SystemLoad)是系统CPU繁忙程度的度量,即有多少进程在等待被CPU调度(进程等待队列的长度)。
那么什么是平均负载呢？
简单来说，平均负载是指单位时间内，系统处于可运行状态和不可中断状态的平均进程数，也就是平均活跃进程数，它和 CPU 使用率并没有必然关系。那么什么可运行状态和不可中断状态呢？
所谓可运行状态的进程，是指正在使用 CPU 或者正在等待 CPU 的进程，也就是我们常用 ps 命令看到的，处于 R 状态（Running 或 Runnable）的进程。
不可中断状态的进程则是正处于内核态关键流程中的进程，并且这些流程是不可打断的，比如最常见的是等待硬件设备的 I/O 响应，也就是我们在 ps 命令中看到的 D 状态（Uninterruptible Sleep，也称为 Disk Sleep）的进程。
比如，当一个进程向磁盘读写数据时，为了保证数据的一致性，在得到磁盘回复前，它是不能被其他进程或者中断打断的，这个时候的进程就处于不可中断状态。如果此时的进程被打断了，就容易出现磁盘数据与进程数据不一致的问题。所以，我们可以理解为，不可中断状态实际上是系统对进程和硬件设备的一种保护机制。
在linux系统中，我们常用top或uptime来查看当前系统负载情况，如下：
$ uptime
12:35:36 up 3 days, 10:19, 1 user, load average: 0.58, 0.87, 0.86
各个数据的含义如下：
12:35:36 // 当前时间
up 3 days, 10:19 // 系统运行时间
1 user // 正在登录用户数
0.58 // 系统最近1分钟的平均负载
0.87 // 系统最近5分钟的平均负载
0.86 // 系统最近15分钟的平均负载
那么平均负载什么时候最优呢？那就是平均负载等于你的CPU个数的时候，大家可通过如下命令查看自己的CPU个数。
$ grep 'physical id' /proc/cpuinfo | sort -u
physical id : 0
physical id : 1
平均负载过高，一般是由三种原因造成的：
- CPU 密集型进程，使用大量 CPU 会导致平均负载升高。此时CPU使用率会比较高。
- I/O 密集型进程，等待 I/O 也会导致平均负载升高，注意，此时的CPU 使用率不一定很高。
- 大量等待 CPU 的进程调度也会导致平均负载升高，此时的 CPU 使用率也会比较高。
我们可以通过mpstat , pidstat 等命令来分析和排查，具体是哪类原因导致的。
# -P ALL 表示监控所有 CPU，后面数字 5 表示间隔 5 秒后输出一组数据
$ mpstat -P ALL 5
Linux 4.15.0 (ubuntu) 09/22/18 _x86_64_ (2 CPU)
13:30:06 CPU %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle
13:30:11 all 50.05 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 49.95
13:30:11 0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 100.00
13:30:11 1 100.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
# 间隔 5 秒后输出一组数据
$ pidstat -u 5 1
13:37:07 UID PID %usr %system %guest %wait %CPU CPU Command
13:37:12 0 2962 100.00 0.00 0.00 0.00 100.00 1 stress