AntiHallu AI 可信度检测引擎
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @user_6c05603b/ai-trust-checker。
技能介绍
为什么需要它
LLM 生成的文本读起来很顺,但里面的事实断言往往夹杂着无来源的数字、过度自信的措辞和断裂的因果链。人工逐条核对成本高,直接发布又容易翻车。AntiHallu 尝试把这件事变成可重复的检查流程:把 AI 回复丢进去,它会告诉你哪些地方可能是编的、为什么、怎么改。
核心能力
- 断言提取:逐条识别文本中的事实性陈述,而不是整段给出模糊判断。
- 三视角交叉评分:
- Flux:检查措辞是否审慎,加分词如「可能」「大概」,扣分词如「一定」「百分之百」。
- Causal:检查因果推理是否完整,是否存在无因果却断言因果的情况。
- Prob:检查是否有来源支撑,如「据报道」「据 IDC」,而不是裸数字或纯观点。
- 结构化报告:输出总体置信度、风险等级,并标注高风险断言和改进建议。
- 加权公式:
overall = 0.3 × flux + 0.4 × causal + 0.3 × prob
适用边界
- 当前主要面向中文文本优化,英文基本可用但评分偏慷慨。
- 纯规则模式下
_HAS_SOURCE正则存在一定误匹配率。 Flux和Causal基线分偏高(>= 0.7),整体评分偏乐观。- 不支持多模态,图片、表格中的断言无法检测。
- LLM 模式需要配置
DEEPSEEK_API_KEY或OPENAI_API_KEY,纯规则模式开箱即用。
使用场景
- 审核 LLM 生成的行业报告,逐条检查数据是否有来源,标记无依据的绝对化结论。
- 定期抽检 AI 客服回复,识别「一定能」「百分百」等过度承诺,避免客诉风险。
- 交叉验证 AI 整理的研究报告,确认每条统计数据是否有引用,支撑后续引用决策。
适合人员
- 内容审核编辑:每天处理大量 AI 生成稿件,需要快速定位无来源数据和绝对化措辞再决定是否放行。
- 客服团队负责人:需要定期检查 AI 客服自动回复是否存在过度自信的表述,避免承诺无法兑现的服务。
- 数据分析师:拿到 AI 生成的统计摘要后,需要逐条验证关键数字的来源可靠性再用于决策汇报。