Agent Skills
返回列表
AntiHallu AI 可信度检测引擎

AntiHallu AI 可信度检测引擎

AI Agent 更新于 2026.08.30

将以下提示词粘贴到你的 AI 对话框中:

请根据 https://skillhub.cn/install/skillhub.md,安装 @user_6c05603b/ai-trust-checker。

技能介绍

为什么需要它

LLM 生成的文本读起来很顺,但里面的事实断言往往夹杂着无来源的数字、过度自信的措辞和断裂的因果链。人工逐条核对成本高,直接发布又容易翻车。AntiHallu 尝试把这件事变成可重复的检查流程:把 AI 回复丢进去,它会告诉你哪些地方可能是编的、为什么、怎么改。

核心能力

  • 断言提取:逐条识别文本中的事实性陈述,而不是整段给出模糊判断。
  • 三视角交叉评分:

- Flux:检查措辞是否审慎,加分词如「可能」「大概」,扣分词如「一定」「百分之百」。
- Causal:检查因果推理是否完整,是否存在无因果却断言因果的情况。
- Prob:检查是否有来源支撑,如「据报道」「据 IDC」,而不是裸数字或纯观点。

  • 结构化报告:输出总体置信度、风险等级,并标注高风险断言和改进建议。
  • 加权公式:overall = 0.3 × flux + 0.4 × causal + 0.3 × prob

适用边界

  • 当前主要面向中文文本优化,英文基本可用但评分偏慷慨。
  • 纯规则模式下 _HAS_SOURCE 正则存在一定误匹配率。
  • Flux 和 Causal 基线分偏高(>= 0.7),整体评分偏乐观。
  • 不支持多模态,图片、表格中的断言无法检测。
  • LLM 模式需要配置 DEEPSEEK_API_KEY 或 OPENAI_API_KEY,纯规则模式开箱即用。

使用场景

  • 审核 LLM 生成的行业报告,逐条检查数据是否有来源,标记无依据的绝对化结论。
  • 定期抽检 AI 客服回复,识别「一定能」「百分百」等过度承诺,避免客诉风险。
  • 交叉验证 AI 整理的研究报告,确认每条统计数据是否有引用,支撑后续引用决策。

适合人员

  • 内容审核编辑:每天处理大量 AI 生成稿件,需要快速定位无来源数据和绝对化措辞再决定是否放行。
  • 客服团队负责人:需要定期检查 AI 客服自动回复是否存在过度自信的表述,避免承诺无法兑现的服务。
  • 数据分析师:拿到 AI 生成的统计摘要后,需要逐条验证关键数字的来源可靠性再用于决策汇报。