Agent Skills
返回列表
🔒

Datadog Synthetics 故障分流

IT 运维与安全 更新于 2026.08.29

将以下提示词粘贴到你的 AI 对话框中:

请根据 https://skillhub.cn/install/skillhub.md,安装 @user_3c6cb52e/datadog-synthetics-failure-triage-skill。

技能介绍

问题:红色检查不等于诊断

在 Datadog Synthetics 里,一次浏览器测试或 API 测试变红,通常只是终点。运维同学收到的往往是一句"check failed",至于是 DNS 抖动、目标服务 5xx、还是断言写错、抑或上游依赖拖慢了响应,全靠人翻 Monitors、翻 Logs、翻变更记录。当告警在短时间内成片出现时,人工排查的成本会迅速压过修复成本。

技能如何工作

这个技能把分流过程固化成可重复的查询流程:

  • 拉取失败现场:通过 Synthetics API 获取失败检查的执行详情,确认是浏览器测试还是 API 测试、请求参数、断言结果与失败步骤。
  • 关联监控信号:调用 Monitors API 拉取相关监控的状态变化,判断失败时段是否伴随指标越界,把"测试挂了"和"服务挂了"分开。
  • 检索日志佐证:用 Logs Search API 在失败窗口内搜索应用日志,寻找与测试断言对应的错误输出或异常堆栈。
  • 输出可操作诊断:将三类信号对齐到同一时间轴,给出失败原因的定位方向,而不是一个模糊的停机告警。

适用边界与注意点

  • 依赖 datadog-api-client(Python 3.8+),需要调用方具备 Synthetics、Monitors 与 Logs 相关 API 的访问权限。
  • Logs Search 的有效性取决于日志保留期与索引范围;失败窗口过旧时可能查不到佐证。
  • 它负责把信号连起来,不替代根因修复:结论仍需结合业务代码与部署记录确认。

使用场景

  • 当Datadog Synthetics的浏览器测试失败时,自动关联Monitors的指标异常和Logs中的错误日志,定位是目标服务故障还是断言错误
  • 处理API测试失败时,通过Logs Search API检索失败时段的应用日志,确认是否因第三方依赖响应超时导致
  • 在监控告警成片出现时,批量拉取多个失败检查的执行详情,快速区分服务宕机与测试脚本缺陷

适合人员

  • SRE工程师:需要在合成测试失败时快速获取关联监控与日志信号,缩短根因定位时间
  • 监控告警运维:当Synthetics检查变红时,希望自动整合多源数据生成诊断报告,减少手动排查步骤
  • 应用性能工程师:在API测试失败后,需要通过日志检索确认是否因外部依赖性能下降导致,优化响应策略