跳到主要内容

1 篇博文 含有标签「同比环比告警」

查看所有标签

同比、环比告警,减少周期波动误报

· 阅读需 9 分钟

告警复核时,运维林工准备把一台批处理主机的 CPU 阈值调高。每天任务启动后都会报警,值班人员查过进度和业务响应,往往又确认是一次预期高峰。

但拉开低峰时段的曲线,他又发现另一种变化:CPU 使用率比平时明显升高,却一直没有达到原来的告警阈值。如果这时继续调高阈值,这类变化就更难被同一条规则发现。

林工需要决定的,既包括什么时候应该响应,也包括怎样减少重复确认。下面沿着这次简化的策略复核,说明历史比较如何帮助他作出判断;数值均为示例,不代表通用阈值或实际效果。

同比、环比告警可以把历史表现变成明确的比较依据,让周期性高峰不必每次都从头解释,也让低峰时值得关注的偏离更容易进入核查范围。

运维复核批处理高峰的重复告警,准备结合历史表现调整判断依据