RelayAI 大模型对比
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @user_311a5011/relayai-model-compare。
技能介绍
问题背景
选型或调 prompt 时,你往往只能在脑子里猜「A 模型会不会比 B 快、贵、写得好」——换模型来回试一遍,既费时间,也难以在同一条提示词下保留可比记录。若团队要对外汇报某次调用的响应速度与token 费用,手工记日志更是容易漏项。
技能如何工作
本技能依托已配置的 RelayAI API Key,走 /relayai-compare 或自然语言「对比模型」触发流程:输入测试提示词后,从列表中勾选 2~4 个模型,由 RelayAI 并行发起请求;待全部返回后生成可浏览器打开的 HTML 对比报告。
报告按维度并排呈现:
- 响应内容:各模型完整输出
- 响应速度:首 token 延迟与总耗时
- Token 消耗:输入/输出 token 计数
- 费用估算:按当前单价折算本次调用成本
界面包含并排卡片、速度柱状图与费用表格,并支持导出为 Markdown,便于贴进评审文档或选型纪要。
适用边界
并行对比会同时产生多个模型的 token 计费,模型过多会拉长等待时间;文档建议控制在 2~4 个。对比结果高度依赖任务类型(文案、摘要、代码生成等),宜作同提示词下的相对参考,而非绝对排名。
使用场景
- 产品上线前要用同一条文案提示词,并排看 DeepSeek 与 Qwen 的输出质量再定默认模型
- 技术写作者拿同一篇文章,让 4 个模型各写摘要,对比长度、事实遗漏与耗时
- 工程负责人想验证「哪个模型生成这段 Python 最快」,用首 token 与总耗时柱状图做记录
- 采购或架构评审需要把单次调用的输入输出 token 与估算费用整理成可导出的 Markdown
适合人员
- 负责 Agent 网关与模型路由的后端工程师,需要在改路由前用同一 prompt 留档对比
- 写技术选型 memo 的架构师,要把响应速度与 token 费用写成可附在评审里的表格
- 运营内容同学,要在两套大模型间选谁写产品文案,且希望看到并排全文而非单次对话截图
- 个人开发者已接入 RelayAI,想快速试水 2~4 个模型而不自己写并行请求脚本