TASK DETAIL · 观澜台
告警守望30分钟聚合分析(飞书摘要,不直推企微)
检查告警守望采集链路和告警摘要,避免把采集失败误判为 0 告警。
停用/完成 需要关注归属:观澜台最近:30d 前频率:every 30m
需要关注
需要关注
下一步
已停用/完成;如无后续价值,可在动力炉中标记归档,避免干扰日常判断。
这项任务在做什么
输入来源
OPD/AMC 告警源 watchdog state 健康检查脚本输出
运行逻辑
采集告警与健康信号,由 Agent 判断采集链路、噪音和高价值问题。
输出去向
本地状态文件 巡检摘要 必要时飞书/企微提醒
证据线索
/Users/zhengbokai/.hermes/cron/output/b91ff4b01147/2026-07-04_07-46-47.md skill:remote-service-admin-triage
运行节奏
状态停用/完成 ok最近运行2026-07-04T07:46:47.864866+08:00 · 30d 前下次运行2026-07-04T08:16:47.864866+08:00投递方式origin · agent
最近输出
这里直接展示最近一段输出;完整机器可读数据保留在 report-bus.json,不放进人类阅读页。
2026-07-04T07:46:47.304686+08:00
文件或脚本失败,要明确说明失败点和下一步,而不是假装无告警。
## Response
## 结论
当前**不能判定“0 告警”**:告警守望的 AMC/OPD 采集源持续不可用,最近一次成功采集停在 **2026-07-04 02:22:31**,截至本次巡检约已形成 **5 小时 20 分钟以上盲区**。
近 60 分钟内新增的高价值问题主要是**巡检系统自身故障**,不是业务告警本身。
## 重点问题
1. **P1|巡检系统自身故障:AMC/OPD 采集持续超时**
- `collector_status=error`
- `alert_data_status=UNKNOWN`
- 最近多次运行均超时:
- `opd_reader.py amc-alerts --pages 10 --rows 100 --output-limit 1000`
- 超时阈值从 100s 到 160s 仍失败
- 最近成功时间:`2026-07-04T02:22:31+08:00`
- 当前状态明确是 **SOURCE_UNAVAILABLE / unknown_or_failed**,不能展示为绿色或 0 告警。
2. **业务告警视角:最近有效数据已过期**
- 最新可用快照仍是 `20260704_022230_amc.json`。
- 该快照里曾有 P1 候选,包括:
- VIP/广告超时数据上报监控:iOS、Android 两条
- 充值后资产发放服务补单/对账修复数据 1 条
- kgcron 歌手补充信息任务执行失败
- kgmonitor 失败率异常
- 但这些都是 **02:22 前后的旧数据**,本轮不能据此判断当前是否仍在发生。
3. **重复噪声/自动恢复**
- 当前近 60 分钟没有新的有效业务告警输入可做去重与恢复判断。
- 旧快照中存在自动恢复和低信号 wxinform 类告警,已不应逐条转发。
## 建议动作
1. **优先恢复采集链路**
- 刷新或重建 `tmeoa-reader / Chrome CDP` 浏览器上下文。
- 先跑低负载探测:`amc-alerts --pages 1 --rows 20 --output-limit 50`。
- 成功后再执行一次 watchdog dry-run,并补看 02:22 之后盲区内是否有 P0/P1。
2. **把本次问题按“巡检系统自身故障”处理**
- 这是符合企微少量直推条件的 SELF_FAILURE 类型。
- 但不要把未分析的原始告警直推企微。
3. **恢复后重点回溯**
- 回溯 VIP/充值对账/任务失败/失败率异常相关指纹,确认是否持续、恢复或升级。
- 若盲区内出现 P0、持续 P1 或多业务扩散,再单独升级通知。
## 机制状态
- 已确认配置:`routing.realtime_wecom_enabled=false`,实时任务当前是**只落盘、不直推企微**,符合机制要求。
- `notifier_status=disabled_recorded_only`,历史候选通知被记录为 `realtime_wecom_disabled`,未直接推送。
- 当前最大机制风险不是企微直推,而是 **采集源持续 UNKNOWN 导致监控盲区**。
- 本轮检查已覆盖配置、状态文件、source health、最近 run summaries/errors、最近快照;未完成/阻塞项:**因 AMC/OPD 采集持续超时,无法判断 02:22 之后真实业务告警状态**。