Grafana借助钉钉的告警和噪声抑制

/ 监控 / 没有评论 / 961浏览

Environment

Software:grafana

Necessary:当前有监控项目

word

  1. 【notification】 通知
  2. 【conditions】 美: [kən'dɪʃnz] n. (居住、工作或做事情的)环境 (影响某事发生的)物质环境 <保险>承保险别 条件( condition的名词复数 ) 状况 健康状况 环境
  3. 【evaluate】 美: [ɪˈvæljuˌet] vt. 评价 求…的值(或数) 对…评价 [数学、逻辑学]求…的数值 vi. 评价,估价
  4. 【above】 在什么之上

Demo

dingding alert

grafana dashboard demo

Get dingding token url

image-20191211175740487

需要注意的是,钉钉的机器人增加变得有限制了,需要有告警内容过滤,所以这里注意,设置告警内容的时候,最好添加关键字,如“告警”字样,在grafana告警发出的信息也包含此字样

获取到钉钉的 token url,记住,不要外泄!!!!!


update :2019-12-11


Configure grafana notification media


都在图里


Dashboard config alert


都在图里


上面的红线则代表着告警的阈值

Conditions

告警的噪声抑制,主要靠的是我们设置的策略,要选择平均值,还是最大值、最小值,控制每几分钟去检测,与设置的阈值的关系

以及在没有获得数据,或者执行异常的情况下,是否被视为应该发出告警

其中微妙,待你细品。

End

总的流程是

  1. 获取携带钉钉告警的tokne的url
  2. 在Grafana添加告警媒体,并测试可用性
  3. 在具体的Grafana的Dashboard配置监控细节及告警发送媒体