AI幻觉核查器
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @org-vc3t81nj/cite-hallucination-check-moways。
技能介绍
要解决什么问题
咨询与研报里常见「标了【实证】、出处却查不到」——KPMG 2025 年报告因大量引用无法核实被撤,就是典型后果。人工逐条核源成本高,且缺少统一规则时容易把真引用错杀,或把拼凑来源放过。本技能把「标实证前必核源真实存在」落成可重复的确定性管线,输出带证据的红旗清单,供人工复核后再改正文。
如何工作
五阶段链路大致如下:
- 检测与解析:从 docx / pdf / md / 纯文本(或粘贴文本)抽出引用,拆成咨询语境下的六组件(标题、作者/机关、出版方、日期、URL、文号/标准号等)。
- 三路分诊:可形式化核验的进检索;需推理的走语义判断;设计上不可公开的(同上、未公开访谈、甲方内部数据等)直接标无法核实,不算编造。
- 多源检索:默认可联网——本地
grep源文件、权威库与接口、WebSearch/WebFetch 定向核对;涉甲方机密词不送进公网搜索。 - 组件比对:原引用与候选来源逐组件打标(
match/partial/not/weak/unknown),结合语义而非纯字符串(简称与全称、年份差一行即不同文件)。 - 确定性分类:脚本按规则归入五类——
exist、exist-minor、fake、unknown、unsure,并按严重度排序输出红旗:最相似真实来源、对不上的组件、一句话理由与建议动作。
配套 scripts/cite_check.py 负责抽取、verify 中的确定性校验与 classify;语义检索与组件回填由 Agent 完成,且在 classify 前需通过 checkpoint(有 ERROR 则禁止出最终分类报告)。
边界与注意点
- 给出的是「大概率有问题」的证据,不是终审;宁可漏判编造,也不轻易把真引用标成 fake。
exist-minor机检召回偏低,判到小错类务必人工再核。- 本技能只核引用真实性,不做错别字、行业采数、去 AI 味改写,也不判断正文是否 AI 生成。
使用场景
- 管理咨询或战略报告定稿前,对正文【实证】脚注与参考文献列表抽取引用,按五类规则筛编造与需更正项。
- AI 起草的 docx/pdf 含 [source: 文件名:页] 或 URL 标注时,在对外交付前跑核查管线并依红旗清单停删或降标【估算】。
- 撰写尽调、行业白皮书时,核对政策文号、巨潮年报链接、统计公报标题与发文机关等六组件是否对得上真实出处。
- 涉甲方未公开数据的引用仅在本地 raw 源与知识库 grep 核验;可公开条目再 WebSearch/WebFetch,避免机密词进公网检索。
适合人员
- 管理咨询顾问,需在客户交付前证明每条【实证】出处可溯且标题、机关等关键组件无误。
- 研报、审计或尽调材料的质控人员,要统计引用编造率并产出带证据的红旗清单供复核。
- 用大模型写含参考文献区的白皮书作者,要把「标实证前必核源」嵌进审稿而非事后补救。
- 维护客户切片与原始源文件的分析师,需在本地比对与权威库、联网检索之间按合规红线分工核验。