SEO 百科

告警

本页目录

告警

告警 是把监控判定与通知接起来的那一段:条件成立时按预定路径把人叫醒。它与监控的区别在动作,指标图自己不会找人,站点挂掉时缺的正是这一步[1]。

一条可用的告警要满足什么

可行动。收到后要能判断下一步做什么。“CPU 高于 80%”这类阈值在缺乏背景信息时只是噪音。

有分级。首页不可访问与某张图 404 不该走同一个通知渠道,等级决定打扰谁、打扰到什么程度[2]。

能收敛。同一故障触发几十条消息会让人麻木,按主机或服务合并、给恢复通知,是常见的降噪做法。

有责任人。规则挂在无人认领的群组上,等于没有告警[1]。

该设的几组条件

站点层:关键路径连续失败、状态码比例异常、证书临近到期、响应时间超过基线若干倍。

资源层:磁盘写满、内存回收频繁、进程数或队列超上限、备份任务失败。

抓取层:Search Console 报告里的抓取错误激增、已被排除的网址数量突增,这类信号说明问题出在引擎侧看到的那一面[3]。

误报的三类来源

探测点网络抖动、发布过程中的短暂不可用、阈值定在没有历史数据支撑的位置。处理办法是给条件加持续时间,而不是把阈值放松[2]。

漏报更危险:只监控首页,深层页面全错不会响;只监控机器资源,应用返回空数据也一切正常。

常见误用

第一种是把所有指标都设告警,一周后人就不看通知了。第二种是没有恢复通知,人一直在处理已经过去的事故。第三种是把告警记录当复盘材料用,事后没有归类改规则[1]。

附录

参见

参考资料

官方(境外)

  1. 《Alertmanager 文档》,Prometheus。
  2. 《Zabbix 告警动作》,Zabbix LLC。
  3. 《排查抓取问题》,Google 搜索中心。

外部链接