在 Linux 服务器上排查故障时，需要使用一系列命令来检查系统状态、日志文件、资源利用情况以及网络状况。以下是常用的故障排查命令，按照不同场景分类说明。

1. 系统资源相关命令

1.1 查看 CPU 使用情况

bash

复制

top

• 实时显示 CPU、内存、任务的使用情况。
• 重点关注： %CPU：占用 CPU 资源的进程。 load average：系统负载。

bash

复制

htop

• 更直观的交互式工具（需要安装）。

1.2 查看内存使用情况

bash

复制

free -h

• 显示内存和交换空间使用情况。 Mem：物理内存。 Swap：交换分区。

1.3 查看磁盘空间

bash

复制

df -h

• 检查磁盘的使用情况（以人类可读的格式显示）。
• 重点关注： %Used：磁盘分区的使用率是否接近 100%。

bash

复制

du -sh /path/to/directory

• 查看某个目录的大小。

1.4 查看 IO 性能

bash

复制

iotop

• 实时查看哪个进程占用磁盘 IO（需要安装）。

bash

复制

iostat

• 显示 CPU 和磁盘 IO 的详细信息。

1.5 查看服务器运行时间

bash

复制

uptime

• 显示系统运行时长、当前登录用户数和负载情况。

2. 日志相关命令

日志文件是排查故障的重要依据。

2.1 查看系统日志

bash

复制

tail -f /var/log/syslog

• 实时查看系统日志（适用于 Ubuntu/Debian）。

bash

复制

tail -f /var/log/messages

• 实时查看系统日志（适用于 CentOS/RHEL）。

2.2 查看服务日志

• 不同服务的日志路径可能不同，常见的有： Nginx：/var/log/nginx/access.log 和 /var/log/nginx/error.log Apache：/var/log/apache2/access.log 和 /var/log/apache2/error.log MySQL：/var/log/mysql/error.log

示例：

bash

复制

tail -f /var/log/nginx/error.log

2.3 搜索关键字

bash

复制

grep "关键字" /var/log/syslog

• 搜索日志中与关键字相关的记录。

3. 网络相关命令

3.1 检查网络连接

bash

复制

ping www.example.com

• 检查与目标主机的连通性。

bash

复制

ping -c 4 192.168.1.1

• 发送 4 个数据包到指定 IP。

3.2 路由追踪

bash

复制

traceroute www.example.com

• 检查请求到目标主机的路由路径（需要安装）。

3.3 检查端口占用

bash

复制

netstat -tuln

• 查看当前服务器监听的端口及其状态。

bash

复制

ss -tuln

• 功能类似于 netstat，但性能更高。

3.4 检查网络流量

bash

复制

iftop

• 实时查看网络流量（需要安装）。

3.5 DNS 解析

bash

复制

nslookup www.example.com

• 查询域名的 DNS 解析结果。

bash

复制

dig www.example.com

• 更详细的 DNS 查询工具。

4. 进程相关命令

4.1 查看运行的进程

bash

复制

ps aux

• 列出所有运行的进程。

4.2 查找特定进程

bash

复制

ps aux | grep "进程名"

• 查找与指定进程名相关的进程。

4.3 杀死进程

bash

复制

kill -9 PID

• 终止指定 PID 的进程。

bash

复制

pkill -9 进程名

• 根据进程名终止进程。

4.4 检查进程资源使用

bash

复制

top

• 在 top 中可以按 P（按 CPU 排序）或 M（按内存排序）。

bash

复制

pidstat

• 查看单个进程的 CPU 和 IO 使用情况（需要安装）。

5. 服务相关命令

5.1 检查服务状态

bash

复制

systemctl status 服务名

• 检查服务是否正常运行。

5.2 启动、停止、重启服务

bash

复制

# 启动服务
sudo systemctl start 服务名

# 停止服务
sudo systemctl stop 服务名

# 重启服务
sudo systemctl restart 服务名

5.3 查看服务启动日志

bash

复制

journalctl -u 服务名

• 查看指定服务的日志。

6. 系统内核相关命令

6.1 查看内核消息（实时）

bash

复制

dmesg -T

• 查看内核日志，排查硬件或驱动问题。

6.2 查看系统启动日志

bash

复制

journalctl -b

• 查看当前启动过程的日志。

7. 用户登录和权限相关命令

7.1 查看当前登录用户

bash

复制

w

• 显示当前登录用户及其活动。

bash

复制

who

• 查看当前在线用户。

7.2 检查最近登录记录

bash

复制

last

• 显示最近登录的用户列表。

7.3 检查权限问题

bash

复制

ls -l /path/to/file

• 查看文件或目录的权限。

8. 磁盘与文件系统相关命令

8.1 检查磁盘健康

bash

复制

smartctl -a /dev/sdX

• 查看磁盘的 SMART 健康状态（需要安装 smartmontools）。

8.2 修复文件系统

bash

复制

fsck /dev/sdX

• 检查并修复文件系统错误。

9. 性能监控与分析工具

9.1 sar

bash

复制

sar -u 1 5

• 查看 CPU 使用情况，每秒记录一次，共记录 5 次。

9.2 vmstat

bash

复制

vmstat 1 5

• 显示 CPU、内存、IO 和进程的统计信息。

9.3 strace

bash

复制

strace -p PID

• 跟踪指定进程的系统调用，排查进程问题。

10. 综合排查步骤

1. 检查资源：
2. 使用 top 或 htop 查看 CPU、内存和系统负载。
3. 使用 df -h 和 iotop 检查磁盘问题。
4. 查看日志：
5. 系统日志：/var/log/syslog 或 /var/log/messages。
6. 服务日志：如 /var/log/nginx/error.log。
7. 检查网络：
8. 使用 ping、netstat、iftop 检查网络连接和流量。
9. 检查进程：
10. 使用 ps aux 或 top 找出占用资源的进程。
11. 检查服务：
12. 使用 systemctl 检查服务状态并重启服务。

总结

通过以上命令，您可以快速定位 Linux 服务器的故障原因并采取相应措施。在排查问题时，建议结合日志分析和系统监控，形成系统化的故障排查流程。