Prometheus 告警组件 Alertmanager 的使用并接入 Grafana

前言

在现代监控体系中，告警是不可或缺的重要组成部分。Prometheus 虽然能够收集和存储监控数据，但告警功能主要由其姊妹项目 Alertmanager 负责。Alertmanager 处理由 Prometheus 服务器发送的警报，负责去重、分组、抑制和路由到正确的接收器，如电子邮件、Slack、PagerDuty 等。

本文将详细介绍如何在 CentOS 系统上部署和配置 Alertmanager，将其与 Prometheus 集成，并最终接入 Grafana 实现统一的告警管理和可视化。

Alertmanager 安装与配置

1. 下载并安装 Alertmanager

首先，我们需要从官方仓库下载 Alertmanager：

# 下载 Alertmanager
wget https://github.com/prometheus/alertmanager/releases/download/v0.28.1/alertmanager-0.28.1.linux-amd64.tar.gz

# 解压下载的包
tar -zxvf alertmanager-0.28.1.linux-amd64.tar.gz

# 移动到安装目录
sudo mv alertmanager-0.28.1.linux-amd64 /usr/local/alertmanager

2. 创建专用用户

为了安全考虑，我们创建一个专用用户来运行 Alertmanager 服务：

# 创建 Alertmanager 用户组
sudo groupadd alertmanager

# 创建 Alertmanager 用户
sudo useradd -g alertmanager -m -d /var/lib/alertmanager -s /sbin/nologin alertmanager

# 设置目录权限
sudo chown -R alertmanager:alertmanager /usr/local/alertmanager
sudo chown -R alertmanager:alertmanager /var/lib/alertmanager

3. 配置 Alertmanager

创建 Alertmanager 的主配置文件：

sudo vim /usr/local/alertmanager/alertmanager.yml

添加以下配置内容（根据实际情况修改邮箱配置）：

global:
  smtp_smarthost: 'smtp.qq.com:587'  # QQ邮箱SMTP服务器
  smtp_from: 'your_email@qq.com'     # 发件人邮箱
  smtp_auth_username: 'your_email@qq.com'  # 邮箱账号
  smtp_auth_password: 'your_auth_code'     # 邮箱授权码（不是密码）
  smtp_require_tls: true             # 要求TLS

route:
  group_by: ['alertname']            # 按告警名称分组
  group_wait: 30s                    # 分组等待时间
  group_interval: 5m                 # 分组间隔时间
  repeat_interval: 1h                # 重复告警间隔
  receiver: 'email-alert'            # 默认接收器

receivers:
  - name: