告警通知发给谁，核心答案是把告警发给当前正在值班且能立即处理问题的人，而不是发给所有人。很多人搭建值班机制时，第一步就在“通知谁”上栽跟头：要么全员轰炸，要么发给一个长期不看的静态群，真正合理的机制，是用“值班表+路由规则+升级策略”三层结构，让每一条告警都能精准找到当班负责人。
值班机制的核心：先定义“谁该收到”，再谈“怎么通知”
告警通知的对象从来不是固定的某个人,而是一个动态的“角色”，你需要先把告警按影响范围和紧急程度分类，然后给每一类告警绑定明确的接收人。
告警分级是分配通知对象的前提
业内比较通用的做法是把告警分成三级：P1（严重故障）、P2（一般故障）、P3（提示信息）。
- P1告警：核心业务不可用、数据丢失、机房断电，这类告警必须直接触达当前值班工程师、技术负责人，甚至运维总监，通知方式要同时使用电话、短信、APP推送，确保中断率最低。
- P2告警：某个非核心模块报错、响应时间超标，通知对象是当班工程师和所属业务线的接口人，不需要惊动管理层。
- P3告警：磁盘空间即将不足、某个定时任务延迟，这类信息更适合进入工作群或工单系统，由值班人员按闲忙程度自行处理。
值班表怎么排：别只排人，要排“角色”
很多团队排值班表时只写“张三、李四、王五”，这是非常粗糙的，行业共识认为，值班表应该按“角色”来排，而不是按“人名”来排，一张合理的值班表至少包含三个角色：
- 值班工程师（Primary）：第一责任人，负责处理所有P1和P2告警。
- 备份工程师（Secondary）：当Primary超过10分钟未确认告警时，告警自动升级到Secondary。
- 技术经理（On-call Manager）：P1告警在Primary和Secondary都未处理时，直接电话至经理，由其介入协调资源。
这种“角色占位”的方式，能让告警路由规则完全自动化，排班时只需要填对应的人名，系统自动把告警按角色优先级发出。
告警通知发送规则怎么定：避开群的诱惑，直达个人
部分团队的告警通知群多达数十个,出现问题后群里刷屏，值班员反而屏蔽了群消息，正确的做法是把告警通知当作一条有明确收件人的“消息管道”，而不是广播。
分级通知渠道选择
这里有一个比较实用的配置参考：
| 告警级别 | 通知渠道 | 优先级 | 重复通知策略 |
|---|---|---|---|
| P1 | 电话 + 短信 + APP推送 | 最高 | 每5分钟重试一次，直至确认 |
| P2 | 短信 + APP推送 | 高 | 每15分钟重试一次 |
| P3 | 企业微信/钉钉群 | 普通 | 不重试，仅发送一次 |
不少刚开始接触监控告警的运维人员会问：告警通知发给谁的值班机制怎么搭才能不漏告警？ 答案在于设置“未确认升级”策略，当告警推送给Primary后，系统开始计时，如果2分钟内无人点击确认，则自动向Secondary发送通知，再超时5分钟，通知升级至技术经理。
告警通知避免“疲惫轰炸”
告警通知如果过多,会产生“狼来了”效应，需要设置抑制规则和去重规则。
- 同一台机器同一指标在30分钟内只发送一次告警。
- 维护窗口期内发生的告警,自动归入静默名单。
- 夜间（22:00-08:00）的P3告警统一合并，次日早晨统一推送摘要。
只有当值班人员每天收到的告警数量控制在可感知的范围内,他们才会对每一条告警保持敏感，这是值班机制能否长期运转的基础。
告警值班机制的最佳实践：从“人工盯”到“规则管”
想要搭建一套不依赖“人的自觉”的值班机制，重点在于将流程产品化，可以参考以下四个实操步骤：
- 梳理监控项映射表：把每一条监控规则对应到具体的业务负责人，数据库连接数超限”归属于DBA组，“支付接口超时”归属于支付开发组，没有归属的告警不允许上线。
- 建设排班日历：建议至少排两周的班次，避免频繁调整，排班表需要支持手机端查看和换班申请，因为节假日存在封网或出行等场景。
- 配置告警确认与关闭动作：值班员点击“确认”后，需要填写处理备注（如“已知晓，重启中”），告警关闭时必须关联工单号，便于事后复盘。
- 定期轮换值班时长：在传统的企业微信群接龙式喊人来处理问题，很难长期维持值班的积极性，比较符合实际的做法是采用一周轮换制，周一至周五设白班值班员（9:00-18:00），夜间和周末由独立小组轮值，这样能避免因长期熬夜导致人员流失。
排班和告警路由的联动配置
排班表不止是给行政看的,它必须和监控平台对接，具体操作路径如下：
- 在监控系统里创建“值班日历”插件，录入角色和日期。
- 将告警接收人字段设置为动态变量,引用的是“当天的Primary角色”，不是固定手机号。
- 当告警产生时,系统自动解析当天值班人，按照角色顺序完成通知。
如果团队还没有复杂的自动化平台,也可以利用Excel结合企业微信机器人实现基础联动：将值班表导入一个共享表格，利用机器人按日期将当班人员设置为告警群管理员，并在发生告警时@对应人员。
告警升级机制要写在纸面上
在遇到重大故障时,升级机制是保障告警不被淹没的最后一道防线，这里需要明确什么情况下必须升级以及升级路径是什么。
升级机制的一种实用模型
- 10分钟未响应：自动通知Secondary。
- 20分钟未响应：技术经理介入，同时系统向技术总监发送事后同步邮件。
- 30分钟未响应或处理失败：正式启动应急响应预案，通知研发VP及产品负责人。
行业内有部分企业采用告警升级时间递增倍数的做法,即“10分钟、20分钟、40分钟”的间隔，以此避免过度打扰，升级机制不需要做得特别复杂，关键是要有人承担“终止升级”的职责，也就是接收到最高级告警的管理者，需要直接决策是继续攻关还是进行降级或回滚操作。
告警通知机制复盘：值班记录怎么用
告警通知发出去并不是终点,一个优秀的值班机制，需要定期审视“告警是否发对了人”。
- 每周统计告警响应时间：响应时间过长的告警，优先排查是通知渠道失效，还是值班员因事未收到。
- 对比告警量和处理时长：若P3告警数量占比持续过高，说明监控阈值设置不合理，应调高阈值或增加告警抑制。
- 关注“无效告警”比例：即值班员点确认后，发现业务实际无影响的告警占比，据统计，这一比例在成熟团队通常能控制在20%以下，如果过高，说明监控项的梳理存在较大问题。
不少云厂商也提供了现成的通知策略机制,例如简米云的“钉钉机器人运维群”方案、酷番云的“云监控告警通知”模板，都能快速实现按值班表发送而非全员群发，也有团队在对比自建告警平台和云监控方案的优缺点时，看到自建平台在对接内部排班系统时更灵活，但云监控方案在搭建初期能节省人力成本，选择哪种方案取决于团队已有的技术栈投入。
常见问题快速问答
告警通知是否需要包含值班经理？
需要,但通知经理的方式和通知工程师的方式应当有所区别，经理收到的信息应更侧重于“业务影响面”和“当前处理进展”，而不是原始的技术日志，所以建议给经理单独配置一条高聚合度的消息模板，仅在P1或跨团队协作时触发。
小团队没有专职运维怎么值班？
小团队可以采用“兼职值班+工具兜底”的模式，将产品、研发等岗位的核心人员纳入排班池，白天故障按职责直接找对应开发，夜间故障则只推送手机端给当班人，同时配合“无人确认时自动在第二天上班前通报工作群”的规则，避免深夜反复打扰所有成员。
告警通知脚本如何避免重复打扰？
建议在脚本中维护一个本地缓存（或Redis），记录每条告警的指纹（如主机名+指标名+时间戳），同一指纹通知一次后，在冷却期内（例如30分钟）自动丢弃，同时给每个告警关联一个“确认状态”，只有未确认的告警才触发升级通知逻辑。
首发原创文章，作者：王坚，如若转载，请注明出处：https://idctop.com/%e5%91%8a%e8%ad%a6%e9%80%9a%e7%9f%a5%e5%8f%91%e7%bb%99%e8%b0%81%e7%9a%84%e5%80%bc%e7%8f%ad%e6%9c%ba%e5%88%b6%e6%80%8e%e4%b9%88%e6%90%ad/
