Prometheus 告警老是抖,先查 for 和 evaluation_interval 的关系
【摘要】 告警反复触发恢复,多半是时间参数没对齐。原理for 表示持续满足条件多久才告警。如果 for 小于两次评估间隔的抖动,就会频繁翻转。实践for 至少设为 evaluation_interval 的 3~4 倍;瞬时尖刺用 rate 窗口平滑,窗口长度不小于抓取间隔的 4 倍。验证用 ALERTS 指标统计一天内 active/resolved 次数,抖动告警会看到成对出现。
告警反复触发恢复,多半是时间参数没对齐。
原理
for 表示持续满足条件多久才告警。如果 for 小于两次评估间隔的抖动,就会频繁翻转。
实践
for 至少设为 evaluation_interval 的 3~4 倍;瞬时尖刺用 rate 窗口平滑,窗口长度不小于抓取间隔的 4 倍。
验证
用 ALERTS 指标统计一天内 active/resolved 次数,抖动告警会看到成对出现。
【声明】本内容来自华为云开发者社区博主,不代表华为云及华为云开发者社区的观点和立场。转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)