监控告警来守夜，代理IP把观察自动化

长期观察靠人盯不现实：代理IP就从监控与告警的搭法入手，一层层说开楚，探什么、多久探一次、告警线定在哪，三件搭好，掉线率的异常第一时间知道，观察从苦差变成后台任务。

探什么

探针按业务造：代理IP建议用轻量真实任务当探针，访问的目标与业务一致，间隔固定，探针本身要能区分资源问题与目标站点问题，两边同时探，异常时才好归因。

多久探一次

频率按业务定：代理IP提醒关键业务分钟级探测，一般业务十分钟到半小时一探，探得太密成本高、数据也冗余，太疏会漏掉短时的故障窗口，频率跟着业务的重要程度走。

监控三件：探针按业务造、频率按重要度定、告警线分两档——代理IP把守夜的任务交给机器，异常不再靠用户投诉发现。

告警线定哪

告警线分两档：代理IP建议设提醒线与行动线，掉线率越过提醒线时人工介入看看，越过行动线时自动切换备用或降级运行，两档之间留缓冲，避免一抖就切、切了又回来的震荡。

三件对照

表格把监控三件与做法对应起来：代理IP提醒监控搭好后要做一次演练，人为断开资源看告警能不能按预期触发，不演练的告警系统，真出事时往往哑火。

监控的数据要回流台账：代理IP提醒探针记录别只躺在监控系统里，按周导出与观察台账合并，告警触发的次数与原因记进判断层，监控是眼睛，台账是本子，两者接起来观察才算闭环。

观察的机制搭好了，还有一类不容易发现的问题，代理IP随后讲假稳定怎么识别，有些稳定是看起来稳。