码迷,mamicode.com
首页 > 其他好文 > 详细

prometheus 与 alertmanager 结合 发送邮件报警

时间:2020-01-15 10:00:17      阅读:271      评论:0      收藏:0      [点我收藏+]

标签:git   interval   odi   tps   一个   ever   not   email   exp   

Alertmanager与Prometheus是相互分离的两个组件。Prometheus服务器根据报警规则将警报发送给Alertmanager,然后Alertmanager将silencing、inhibition、aggregation等消息通过电子邮件、微信、等发送信息,

安装部署 alertmanager

下载软件包

wget https://github.com/prometheus/alertmanager/releases/download/v0.20.0/alertmanager-0.20.0.linux-amd64.tar.gz

解压安装

tar zxvf alertmanager-0.16.0.linux-amd64.tar.gz && cd alertmanager-0.16.0.linux-amd64

启动 alertmanager

./alertmanager --config.file=alertmanager.yml

配置 prometheus 与alertmanager 通信

修改 prometheus.yml 配置文件

配置 与alertmanager 通信

alerting:
  alertmanagers:
  - static_configs:
    - targets:
       - x.x.x.x:9093

增加报警规则,监控主机服务,默认正常是1

#Load rules once and periodically evaluate them according to the global ‘evaluation_interval‘.
rule_files:

  • "rules/*.yml"
groups:
- name: generals.rules
  rules:
  - alert: InstanceDown
    expr: up == 0
    for: 1m
    labels:
      severity: error
    annotations:
      summary: "Instance {{ $labels.isinstance }} down"
      description: "{{ $labels.instance }} down more than 1 minutes"

重载配置文件 kill -hup $pid 或者重启 prometheus 服务

查看配置的报警规则

技术图片

触发报警

报警规则已创建 ,设置邮件通知报警,已qq 邮箱为示列,qq 邮箱需要开启smtp ,
smtp_require_tls 默认为true ,这里需要修改为false,否则邮件触发不成功, smtp_auth_password 填写授权玛

global: 全局配置,包括报警解决后的超时时间、SMTP 相关配置、各种渠道通知的 API 地址等等。
route: 用来设置报警的分发策略,它是一个树状结构,按照深度优先从左向右的顺序进行匹配。
receivers: 配置告警消息接受者信息,例如常用的 email、wechat、slack、webhook 等消息通知方式。

global:
  resolve_timeout: 5m
  smtp_smarthost: ‘smtp.qq.com:465‘
  smtp_from: ‘xxx@qq.com‘
  smtp_auth_username: ‘xxx@qq.com‘
  smtp_auth_password: ‘xxx‘
  #smtp_auth_secret: false
  smtp_require_tls: false
  smtp_hello: ‘qq.com‘

route:
  group_by: [‘alertname‘]
  group_wait: 10s
  group_interval: 10s
  repeat_interval: 1h
  receiver: ‘mail‘
receivers:
- name: ‘mail‘
  email_configs:
  - to: ‘xxx@qq.com‘
    send_resolved: true

触发报警,手动关闭,es 服务,几分钟后收到邮件报警

技术图片

prometheus 与 alertmanager 结合 发送邮件报警

标签:git   interval   odi   tps   一个   ever   not   email   exp   

原文地址:https://blog.51cto.com/sdsca/2466835

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!