Agent Skills
返回列表
📊

实验读出一页

数据分析 更新于 2026.08.30

将以下提示词粘贴到你的 AI 对话框中:

请根据 https://skillhub.cn/install/skillhub.md,安装 @user_bd3231bd/experiment-readout-20260722。

技能介绍

实验结束后,结论散落在各处

每次 A/B 实验或灰度放量结束时,实验信息通常散落在笔记、截图和聊天记录里。假设写在 Jira 或飞书文档中,指标结果在数据看板里截图,讨论结论散落在群聊中,而下一步决策往往还没定下来。当需要向团队或上级同步时,你得从头翻一遍所有来源,手动拼凑成一页能看懂的东西。

experiment-readout 就是为了解决这个问题。它把散落在各处的实验信息收成一份结构化的 Markdown 文档,专门用于内部读出。

核心能力与关键步骤

事后整理,不做实时干预。 这个技能的工作方式分三个步骤:

  1. 澄清上下文。 技能会主动索要实验名称与窗口、假设原文、指标表(含样本量和统计结果)、异常事件和决策语境。
  1. 严格按规则整理。 关键约束是:绝不编造统计显著性。如果用户没给 p 值或置信区间,结果只写方向与幅度,并标注 统计显著性: 待确认。样本量不足时结论降级为方向性观察。指标数值只使用用户提供的数字。
  1. 输出结构化页面。 最终产物包含实验背景与假设、指标结果表、结论(含不确定性)、下一步决策选项和待确认事项。

适用边界

这个技能不做的事同样重要:

  • 不做灰度放量期的实时盯盘,那是 canary-watchlist 的领域。
  • 不做用户反馈主题聚类,那属于 beta-feedback-synth。
  • 不连接实验平台或 BI 工具自动取数,所有指标数值由用户提供。
  • 不重算 p 值、置信区间或显著性,不做因果推断报告。
  • 下一步决策给选项但由人拍板,数据不足时只给「待确认后建议」。

结论质量取决于你提供的指标与统计信息。如果缺样本量或显著性数据,输出只能是方向性观察。

使用场景

  • A/B实验结束后,将散落在笔记和截图中的假设与指标整理成一页内部读出文档,供团队同步结论。
  • 灰度放量阶段性结束,需要把指标结果与下一步决策选项整理成结构化文档,提交给上级审阅。
  • 实验数据由数据团队提供,需要把统计结果整理成包含结论和待确认事项的标准化报告,不重算显著性。
  • 实验窗口内存在发版或故障等干扰事件,需要把异常情况与指标结果并列呈现,供决策参考。

适合人员

  • 负责实验设计与分析的工程师,需要在实验结束后快速生成结构化复盘文档,减少手动拼凑时间。
  • 需要向上级汇报实验结果的团队负责人,希望把散落信息整理成一页结论和决策选项,便于快速拍板。
  • 负责整理实验报告的数据分析师,希望在用户提供统计结果后自动生成标准化读出页面,避免遗漏关键信息。
  • 参与实验决策的产品或运营,需要看到包含指标、结论和下一步选项的单页摘要,以支持全量或回滚判断。