prometheus使用 (十一) alertmanager集群部署
前面我们收集了N多的指标信息,为的不就是当我们环境出现故障的时候能够快速的提醒我们去修改吗 而alertmanager为我们prometheus提供了一个非常好的报警机制 (*゜ー゜*)
一. 告警是怎么实现的
二. 安装alertmanager(集群模式)
#为了保证高可靠性,我们这里以集群模式部署 #拉取软件包 wget https://github.com/prometheus/alertmanager/releases/download/v0.21.0/alertmanager-0.21.0.linux-amd64.tar.gz #我的包(。・∀・)ノ 链接:https://pan.baidu.com/s/1vbbz_jZnuMwg4uvJwyygtw 提取码:1111 #放到3台节点上 scp alertmanager-0.21.0.linux-amd64.tar.gz root@192.168.1.21:/root scp alertmanager-0.21.0.linux-amd64.tar.gz root@192.168.1.22:/root
以下操作3节点同步
#解压 tar -zxvf alertmanager-0.21.0.linux-amd64.tar.gz #拷贝并赋权 install -m 0755 alertmanager-0.21.0.linux-amd64/{alertmanager,amtool} /usr/bin #添加配置文件 cat >> alertmanager.yml <<EOF global: resolve_timeout: 5m route: group_by: [alertname] group_wait: 10s group_interval: 10s repeat_interval: 5m receiver: web.hook receivers: - name: web.hook webhook_configs: - url: http://127.0.0.1:5001 EOF #移动文件并设置权限 install -m 0644 -D alertmanager.yml /etc/alertmanager/alertmanager.yml
1. 服务文件配置(192.168.1.20--主)
cat > alertmanager.service <<EOF [Unit] Description=Alertmanager handles alerts sent by client applications such as the Prometheus server. Documentation=https://prometheus.io/docs/alerting/alertmanager/ After=network.target [Service] User=root ExecStart=/usr/bin/alertmanager \ --config.file=/etc/alertmanager/alertmanager.yml \ --storage.path=/var/lib/alertmanager \ --cluster.listen-address=192.168.1.20:8001 ExecReload=/bin/kill -HUP Restart=on-failure [Install] WantedBy=multi-user.target EOF #如果是单节点,就把这行去了,即可 #--cluster.listen-address=192.168.1.20:8001 #主节点只需要声明自身的ip和端口即可
2. 服务文件配置(192.168.1.21--从1)
cat > alertmanager.service <<EOF [Unit] Description=Alertmanager handles alerts sent by client applications such as the Prometheus server. Documentation=https://prometheus.io/docs/alerting/alertmanager/ After=network.target [Service] User=root ExecStart=/usr/bin/alertmanager \ --config.file=/etc/alertmanager/alertmanager.yml \ --storage.path=/var/lib/alertmanager \ --cluster.listen-address=192.168.1.21:8001 \ --cluster.peer=192.168.1.20:8001 ExecReload=/bin/kill -HUP Restart=on-failure [Install] WantedBy=multi-user.target EOF #--cluster.listen-address=192.168.1.21:8001 \ #指定自身地址 #--cluster.peer=192.168.1.20:8001 #指定master地址
3. 服务文件配置(192.168.1.22--从2)
cat > alertmanager.service <<EOF [Unit] Description=Alertmanager handles alerts sent by client applications such as the Prometheus server. Documentation=https://prometheus.io/docs/alerting/alertmanager/ After=network.target [Service] User=root ExecStart=/usr/bin/alertmanager \ --config.file=/etc/alertmanager/alertmanager.yml \ --storage.path=/var/lib/alertmanager \ --cluster.listen-address=192.168.1.22:8001 \ --cluster.peer=192.168.1.20:8001 ExecReload=/bin/kill -HUP Restart=on-failure [Install] WantedBy=multi-user.target EOF #同上
4. 启动服务(3节点相同)
#移动文件,并设置权限 install -m 0644 alertmanager.service /etc/systemd/system #启动服务 systemctl daemon-reload systemctl start alertmanager systemctl status alertmanager
5. 访问测试
#访问任意节点 192.168.1.20:9093 #通过页面中我们可以看到alertmanager是以集群模式存在的,并且可以看到相关的配置文件