告警设置得太多，最后的结局通常是没人再看。使用代理IP时，如果每天收到几十条提示，重要信号就会被淹没在日常噪声里。把告警数量压下来、把阈值调准，使用代理IP时比不断增加提示项更有效，也更可持续，维护的人也更愿意看。
告警为什么会被忽略
因为信噪比太低。使用代理IP时，阈值定得过紧，正常的波动也会频繁触发，久而久之大家对提示失去反应。把阈值放在真正异常的水平上，宁可少报几次，使用代理IP时也不要让告警变成背景音，那样等于没有告警。
阈值怎么定才合适
用历史数据来定，而不是凭感觉。使用代理IP时，先收集一段时间的正常波动范围，把阈值设在明显超出该范围的位置上。这样触发时才有指向性，使用代理IP时看到提示就知道确实需要处理，而不是先去判断真假。
- 阈值来自历史波动范围
- 只保留经得起复核的项
- 每条告警配一个动作
- 误报要及时下线
需要注意的是，阈值定得宽不等于不设，使用代理IP时完全不设阈值，问题往往会拖到影响结果时才被发现。
告警之后要做什么
告警只是起点，后面必须有动作。使用代理IP时，每条告警都应能对应一个明确的处理步骤，否则它就只是提醒，起不到作用。把动作写进流程，使用代理IP时值班的人照着做即可，不必每次重新判断。
分级比数量更重要。
把告警压到少数几条有效的，比堆一堆更管用。使用代理IP时，信号越少越容易被认真对待。与其增加提示项，不如先把误报降下来，使用代理IP时维护的人才会愿意持续关注这些提示。
告警记录要定期回看。使用代理IP时，把每次触发的时间与处理结果记下来，一段时间后统计哪些阈值几乎从不触发、哪些频繁触发。据此调整一遍，使用代理IP时告警的质量会稳步提升，值班的负担也会下降。