五、添加邮件报警
在实际项目中当监控的某的个指标超过阈值（比如CPU使用率过高），希望监控系统自动通过短信、钉钉和邮件等方式报警及时通知运维人员，Grafana就支持该功能。
第一步： 点击[Alerting]——>[Notification channels]添加通知通道
创建通道
这里的Type有很多选项，包括webhook、钉钉等，这里以邮件为例。
第二步： 邮箱配置
Grafana默认使用conf目录下defaults.ini作为配置文件运行，根据官方的建议我们不要更改defaults.ini而是在同级目录下新建一个配置文件custom.ini。
以腾讯企业邮箱为例，配置如下：
#################################### SMTP / Emailing ##################### [smtp] enabled = true host = smtp.exmail.qq.com:465 user = xxxx@ininin.com # If the password contains # or ; you have to wrap it with triple quotes. Ex """#password;""" password = XXX cert_file = key_file = skip_verify = true from_address = xxxx@ininin.com from_name = Grafana ehlo_identity = ininin.com
然后需要重启Grafana，命令grafana-server.exe -config=E:\file\grafana-6.3.3\conf\custom.ini
第三步： 为指标添加alert
配置预警规则
配置通知方式和信息
Evaluate every
表示检测评率，这里为了测试效果，改为1秒
For
如果警报规则配置了For，并且查询违反了配置的阈值，那么它将首先从OK变为Pending。从OK到Pending Grafana不会发送任何通知。一旦警报规则的触发时间超过持续时间，它将更改为Alerting并发送警报通知。
Conditions
when 表示什么时间，of 表示条件，is above 表示触发值 同时，设置了is above后会有一条红线。
If no data or all values are null
如果没有数据或所有值都为空，这里选择触发报警
If execution error or timeout
如果执行错误或超时，这里选择触发报警
注意： 下一次触发，比如10秒后，它不会再次触发，防止报警风暴产生！
第四步： 测试
请求http://localhost:8848/heap/test接口后，内存升高大于设置的阈值，然后就收到报警邮件。
这里图片没有显示出来，搞不懂为什么。
六、总结
这套监控功能还是挺强大的，就是Prometheus的表达式有点多。
