一、为什么要进行性能监控？

服务器性能监控就像汽车的仪表盘，它能实时告诉你：

• CPU是否达到瓶颈
• 内存使用是否合理
• 磁盘I/O是否存在瓶颈
• 网络带宽是否充足

良好的监控可以让你在问题发生前就采取预防措施，而不是在服务崩溃后才手忙脚乱。

二、基础监控工具全家桶

1. 内置工具三剑客

top/htop： 实时监控进程资源占用情况

# 安装htop
sudo apt install htop  # Ubuntu/Debian
sudo yum install htop  # CentOS/RHEL

vmstat： 虚拟内存统计工具

vmstat 1  # 每秒刷新一次

iostat： 磁盘I/O监控利器

iostat -x 1  # 显示扩展统计信息

2. 系统信息工具

sysstat包： 包含sar、mpstat等强大工具

# 安装sysstat
sudo apt install sysstat
sudo systemctl enable sysstat
sudo systemctl start sysstat

三、专业监控方案部署

1. Prometheus + Grafana黄金组合

这套组合是目前最流行的监控解决方案：

1. 安装Node Exporter收集主机指标
2. 部署Prometheus作为时序数据库
3. 使用Grafana进行可视化展示

2. 详细部署步骤

步骤1：安装Node Exporter

wget https://github.com/prometheus/node_exporter/releases/download/v1.3.1/node_exporter-1.3.1.linux-amd64.tar.gz
tar xvfz node_exporter-*
cd node_exporter-*
./node_exporter &

步骤2：安装Prometheus

wget https://github.com/prometheus/prometheus/releases/download/v2.37.0/prometheus-2.37.0.linux-amd64.tar.gz
tar xvfz prometheus-*
cd prometheus-*
# 编辑prometheus.yml添加node_exporter为target
./prometheus --config.file=prometheus.yml &

步骤3：安装Grafana

# Ubuntu/Debian
sudo apt-get install -y adduser libfontconfig1
wget https://dl.grafana.com/oss/release/grafana_9.1.5_amd64.deb
sudo dpkg -i grafana_*.deb

# CentOS/RHEL
wget https://dl.grafana.com/oss/release/grafana-9.1.5-1.x86_64.rpm
sudo yum install grafana-*.rpm

sudo systemctl start grafana-server
sudo systemctl enable grafana-server

四、高级监控技巧

1. 自定义监控指标

通过编写简单的Prometheus exporters，你可以监控任何你关心的指标：

from prometheus_client import start_http_server, Gauge
import random
import time

custom_metric = Gauge('custom_metric', 'My custom metric description')

if __name__ == '__main__':
    start_http_server(8000)
    while True:
        custom_metric.set(random.random())
        time.sleep(1)

2. 告警配置

在Prometheus中配置Alertmanager，当CPU使用率超过90%时触发告警：

groups:
- name: example
  rules:
  - alert: HighCpuUsage
    expr: 100 - (avg by(instance)(irate(node_cpu_seconds_total{mode="idle"}[5m])) * 100) > 90
    for: 5m
    labels:
      severity: warning
    annotations:
      summary: "High CPU usage on {{ $labels.instance }}"
      description: "{{ $labels.instance }} has high CPU usage: {{ $value }}%"