1. top与htop：实时进程监控利器

top是Linux中最经典的实时性能监控工具。运行top命令后，您可以看到：

top - 14:30:00 up 30 days,  3:15,  1 user,  load average: 0.05, 0.10, 0.15
Tasks: 150 total,   1 running, 149 sleeping,   0 stopped,   0 zombie
%Cpu(s):  2.5 us,  1.2 sy,  0.0 ni, 96.0 id,  0.2 wa,  0.0 hi,  0.1 si
MiB Mem :   7856.2 total,   1024.1 free,   4096.3 used,   2735.8 buff/cache
MiB Swap:   2048.0 total,   2048.0 free,      0.0 used.

其中，load average三个值分别代表1分钟、5分钟、15分钟的平均负载；wa代表I/O等待时间百分比，是诊断磁盘瓶颈的关键指标。htop是top的增强版，提供颜色高亮、垂直/水平滚动、鼠标操作等更友好的界面。

2. vmstat：系统整体性能快照

vmstat命令提供关于进程、内存、分页、块IO、陷阱和CPU活动的报告。例如：

vmstat 2 5

该命令每2秒采样一次，共采样5次。关键列包括：r（运行队列长度）、b（阻塞进程数）、swpd（虚拟内存使用量）、si/so（内存交换入/出）、bi/bo（块设备读/写）、in（中断次数）、cs（上下文切换次数）。

3. iostat：磁盘I/O专项监控

专门监控系统磁盘I/O性能，是诊断存储瓶颈的首选工具：

iostat -dx 2

输出中的%util表示设备利用率，接近100%表明磁盘接近满负荷；await表示I/O请求平均等待时间，值过高可能表示磁盘过载。

4. sar：系统活动历史报告

sar是sysstat工具包的一部分，能够收集、报告和保存系统活动信息：

sar -u 2 5        # CPU使用率
sar -r 2 5        # 内存使用情况
sar -b 2 5        # I/O和传输速率
sar -n DEV 2 5    # 网络统计

更强大的是，sar可以查看历史数据（通常保存在/var/log/sa/），便于进行回溯分析。

1. /proc文件系统：性能数据的源头

Linux内核通过/proc虚拟文件系统暴露大量性能计数器：

cat /proc/stat          # CPU统计
cat /proc/meminfo       # 内存详细信息
cat /proc/diskstats     # 磁盘I/O统计
cat /proc/net/dev       # 网络接口统计

这些文件是许多监控工具的数据来源，直接读取可以获得最原始的性能数据。

2. 基于eBPF的现代工具：bpftrace与BCC

对于更深入的内核级性能分析，eBPF技术提供了强大的动态追踪能力：

# 使用BCC工具集中的execsnoop追踪新进程
sudo execsnoop

# 使用bpftrace追踪open()系统调用
sudo bpftrace -e 'tracepoint:syscalls:sys_enter_open { printf("%s %s\n", comm, str(args->filename)); }'

这些工具可以自定义追踪内核和用户空间事件，实现前所未有的细粒度监控。

3. 可视化监控平台：Prometheus + Grafana

对于生产环境，通常需要建立长期监控和可视化体系：

• Node Exporter：收集主机级别的性能指标并暴露给Prometheus
• Prometheus：作为时间序列数据库，存储和查询性能指标
• Grafana：创建丰富的监控仪表盘，实现性能数据的可视化

这种组合提供了企业级的监控解决方案，支持报警、历史数据分析和多维度查询。