技能创建器
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @user_57f71de6/123-v2-v2。
技能介绍
问题
Agent 技能很容易写成一堆提示词,却缺少触发条件、输出格式和可验证结果。SKILL.md 如果描述不准、边界不清,模型可能该用时不用,或把主观任务硬套固定流程。
工作方式
Skill Creator 按“捕获意图—写草稿—跑测试—评估—迭代”的闭环工作:
- 捕获意图:确认技能要完成什么、何时触发、期望输出,以及是否需要
evals/evals.json测试用例。 - 写草稿:补全
name、description、compatibility和正文;description负责触发,需要覆盖用户可能提到的同义场景。 - 运行测试:同一轮启动带技能与 baseline 的子任务,结果保存到
iteration-1/等目录。 - 量化评估:运行中草拟断言,完成后打分、聚合
benchmark.json,并启动 viewer 查看定性输出与指标。
适用边界
适合有客观输出或固定流程的技能,如文件转换、数据提取、代码生成;写作风格、艺术设计更适合人工判断。每次迭代新建目录,保留历史结果,便于比较 baseline 与技能版本。断言应可客观验证,避免把主观偏好写成硬性指标。不要用它生成误导、越权或恶意访问类技能。
使用场景
- 把一段重复的代码审查流程沉淀成可触发技能,并补充测试用例验证输出格式。
- 为现有技能增加 `description` 触发词,让模型在数据可视化请求中更可靠地调用它。
- 围绕文件转换任务创建测试集,同时运行带技能与 baseline,对比结果并记录指标。
- 根据评估结果重写技能正文,修正断言失败步骤,并在新迭代中保留历史输出便于比较。
适合人员
- 需要把固定工作流沉淀为 Agent 技能的 AI 工程师
- 要验证技能触发与输出质量的产品研发工程师
- 维护团队技能库并需要量化对比版本的技能维护者
- 想从现有对话中提取流程并写成 `SKILL.md` 的自动化负责人