一、引言
在 IT 运维的日常工作里，服务器 CPU 使用率过高可是个常见又让人头疼的问题。CPU 就像是服务器的大脑，它要是“累坏了”，服务器的性能就会大幅下降，甚至可能导致系统崩溃，影响业务的正常运行。所以，掌握服务器 CPU 使用率过高的排查方法就显得尤为重要啦。接下来，咱们就一起深入了解一下具体的排查步骤和方法。
二、初步检查与信息收集
1. 系统监控工具查看
在 Linux 系统中，我们可以使用 top 命令来查看系统的整体运行情况，包括 CPU 使用率、各个进程的资源占用情况等。打开终端，输入 top 命令，就会弹出一个实时更新的界面。
下面是一个示例：
# 技术栈名称：Linux Shell
top # 执行 top 命令查看系统资源使用情况
注释：top 命令会显示当前系统中占用资源较多的进程，第一行显示系统的整体信息，包括当前时间、系统运行时间、登录用户数、系统平均负载等；第二行显示进程的统计信息，如总进程数、运行中的进程数、睡眠中的进程数等；第三行显示 CPU 的使用情况，包括用户空间占用率、内核空间占用率、空闲率等；接下来的部分则按 CPU 使用率从高到低显示各个进程的详细信息，如进程 ID、用户、CPU 使用率、内存使用率等。 通过查看 top 命令的输出，我们可以快速定位到占用 CPU 资源较高的进程。
2. 查看系统日志
系统日志里可能会记录与 CPU 使用率异常相关的信息。在 Linux 系统中，常见的日志文件有 /var/log/syslog 或 /var/log/messages。 示例：
# 技术栈名称：Linux Shell
cat /var/log/syslog | grep "error" # 查看系统日志中包含 "error" 的信息
注释：这个命令会将 /var/log/syslog 文件中的内容输出，并过滤出包含 “error” 的行。通过查看这些错误信息，我们可能会发现一些与 CPU 相关的问题，比如某个服务启动失败、硬件出现故障等。
三、进程层面排查
1. 确定高 CPU 进程
使用 top 命令确定了占用 CPU 较高的进程后，我们可以进一步了解该进程的详细信息。比如，使用 ps 命令查看进程的具体参数。 示例：
# 技术栈名称：Linux Shell
ps -ef | grep <进程 ID> # 查看指定进程 ID 的详细信息
注释：ps -ef 命令会显示系统中所有进程的详细信息，包括进程 ID、父进程 ID、启动时间、执行的命令等。通过管道符 | 将 ps -ef 的输出传递给 grep 命令，过滤出包含指定进程 ID 的行，从而获取该进程的详细信息。
2. 分析进程的资源使用情况
对于一些复杂的应用程序，我们可以使用工具来分析其资源使用情况。例如，对于 Java 应用程序，可以使用 VisualVM 工具。 首先，确保 Java 应用程序启动时开启了 JMX（Java Management Extensions）功能。在启动 Java 应用程序时添加以下参数：
# 技术栈名称：Java
java -Dcom.sun.management.jmxremote -Dcom.sun.management.jmxremote.port=9010 -Dcom.sun.management.jmxremote.authenticate=false -Dcom.sun.management.jmxremote.ssl=false -jar yourApp.jar
注释：这些参数的作用是开启 JMX 功能，允许远程连接到 Java 应用程序，端口号设置为 9010，并且关闭认证和 SSL 加密。 然后，打开 VisualVM 工具，在远程节点中添加该应用程序的 JMX 连接，就可以查看该 Java 应用程序的 CPU 使用率、内存使用情况、线程状态等详细信息。
四、应用程序层面排查
1. 代码逻辑问题
有时候，应用程序的代码逻辑存在问题也会导致 CPU 使用率过高。比如，在一个循环中进行大量无意义的计算。 示例：
// 技术栈名称：Java
public class HighCPUExample {
public static void main(String[] args) {
while (true) {
int result = 0;
for (int i = 0; i < 1000000; i++) {
result += i;
}
}
}
}
注释：在这个示例中，程序会一直处于一个无限循环中，不断进行大量的加法运算，这会导致 CPU 一直处于高负载状态。我们可以通过代码审查、使用性能分析工具（如 VisualVM）来找出这类问题。
2. 数据库查询问题
如果应用程序与数据库交互频繁，那么数据库查询语句的性能也会影响 CPU 使用率。例如，在 SQL 查询中，如果没有正确使用索引，会导致数据库进行全表扫描，增加 CPU 的负担。 示例：
-- 技术栈名称：MySQL
-- 假设我们有一个用户表 users，包含 id、name、age 字段
-- 错误示例：没有使用索引的查询
SELECT * FROM users WHERE age > 20;
-- 正确示例：为 age 字段添加索引
CREATE INDEX idx_age ON users (age);
SELECT * FROM users WHERE age > 20;
注释：在第一个查询中，由于没有为 age 字段添加索引，数据库会对整个 users 表进行扫描，当数据量较大时，会消耗大量的 CPU 资源。而在第二个查询中，我们为 age 字段添加了索引，数据库可以通过索引快速定位到满足条件的记录，从而减少了 CPU 的使用。
五、硬件层面排查
1. CPU 过热
CPU 过热会导致其性能下降，为了保护自身，CPU 可能会自动降低频率，从而影响系统的整体性能。我们可以使用硬件监控工具来查看 CPU 的温度。 在 Linux 系统中，可以使用 lm - sensors 工具。首先安装该工具：
# 技术栈名称：Linux Shell
sudo apt-get install lm - sensors # 在 Debian 或 Ubuntu 系统上安装 lm - sensors
sudo sensors - detect # 检测硬件传感器
sensors # 查看 CPU 温度等信息
注释：lm - sensors 工具可以检测并显示系统中各种硬件传感器的信息，包括 CPU 温度、风扇转速等。如果发现 CPU 温度过高，可能需要检查散热设备是否正常工作，如清理散热器灰尘、检查风扇是否转动等。
2. 硬件故障
硬件故障也可能导致 CPU 使用率异常升高。例如，内存故障可能会导致系统频繁进行内存交换，从而增加 CPU 的负担。我们可以通过硬件检测工具来检查硬件是否存在故障。 在 Windows 系统中，可以使用 Windows 内存诊断工具来检查内存是否正常。在 Linux 系统中，可以使用 memtest86 + 工具。
六、网络层面排查
1. 网络流量过大
如果服务器的网络流量过大，也会导致 CPU 使用率升高。我们可以使用网络监控工具来查看网络流量情况。 在 Linux 系统中，可以使用 iftop 工具。
# 技术栈名称：Linux Shell
sudo apt-get install iftop # 安装 iftop 工具
sudo iftop # 查看网络流量情况
注释：iftop 工具可以实时显示网络接口的流量情况，包括流入和流出的流量速度、各个连接的带宽使用情况等。如果发现某个 IP 地址的流量过大，可能需要进一步检查该连接是否存在异常。
2. 网络攻击
网络攻击，如 DDoS 攻击，也会导致服务器 CPU 使用率过高。我们可以通过防火墙、入侵检测系统等工具来防范网络攻击。 例如，使用 iptables 防火墙来限制某些 IP 地址的访问。
# 技术栈名称：Linux Shell
sudo iptables -A INPUT -s <恶意 IP 地址> -j DROP # 禁止指定 IP 地址的访问
注释：这个命令会将来自指定恶意 IP 地址的所有数据包丢弃，从而防止该 IP 地址对服务器进行攻击。
七、总结
在 IT 运维中，服务器 CPU 使用率过高是一个复杂的问题，可能由多种原因引起。我们需要从系统监控、进程、应用程序、硬件和网络等多个层面进行排查。通过逐步分析和定位问题，我们可以找到导致 CPU 使用率过高的根本原因，并采取相应的措施进行解决。
应用场景
在企业级的 IT 环境中，服务器承担着各种重要的业务任务，如网站服务、数据库服务、应用程序服务等。当服务器 CPU 使用率过高时，会影响这些业务的正常运行，导致用户体验下降，甚至造成业务中断。因此，及时排查和解决 CPU 使用率过高的问题对于保障企业业务的稳定运行至关重要。
技术优缺点
优点
- 多种排查方法结合可以全面、准确地定位问题。
- 利用系统自带的工具和开源工具，成本较低。
- 排查过程可以积累经验，提高运维人员的技术水平。
缺点
- 排查过程可能比较复杂，需要运维人员具备一定的技术知识和经验。
- 对于一些复杂的问题，可能需要花费较长的时间才能定位和解决。
注意事项
- 在进行排查时，要注意备份重要的数据，避免因误操作导致数据丢失。
- 在使用一些工具时，要注意其使用权限和参数设置，避免对系统造成不必要的影响。
- 对于一些关键业务系统，在进行排查和处理时，要选择合适的时间，尽量减少对业务的影响。
评论