目录
引言
Prometheus+grafana监控--初探_IT.cat的博客-CSDN博客
Prometheus和grafana如何搭建前面一篇博客也已经写过了，这里主要实现，当内存、cpu等其他资源在冲高情况下，实现报警。
一、Grafana+onealert报警
Prometheus 报警需要使用 alertmanager 这个组件，而且报警规则需要手动编写（对运维来说不友好）。所以我这里选用 grafana+onealert 报警。注意：实现报警前把所有机器时间同步再检查一遍。
登陆http://www.onealert.com/→注册帐户→登入后台管理
获取appkey
1.1、在Grafana中配置Webhook URL
1、在Grafana中创建Notification channel，选择类型为Webhook；
2、推荐选中Send on all alerts和Include image，Cloud Alert体验更佳；
3、将第一步中生成的Webhook URL填入Webhook settings Url；
URL格式：
http://api.aiops.com/alert/api/event/prometheus/bd8cc0af7b2644f1834a8d0b9d9e5ced
4、Http Method选择POST；
5、Send Test&Save；
1.2、测试cpu负载告警
现在可以去设置一个报警来测试了（这里以我们前面加的 cpu 负载监控来做测试）
#查看cpu占用率
(1- ((sum(increase(node_cpu_seconds_total{mode="idle"}[1m])) by(instance)) / (sum(increase(node_cpu_seconds_total[1m])) by(instance))))*100
1.3、测试报警
在被监控端下载一个stress测试工具
yum install -y epel*
yum install -y stress开始测试
设置压6核cpu，此时cpu就会被冲高
发来的报警如下图
睿象云也会爆出此问题
我们解决问题后，只需要点关闭就行，就会当作问题被解决了
