AI 会一本正经地胡说八道:幻觉是什么,怎么防

AI 编造数据、虚构文献、张冠李戴不是故障而是机制。理解幻觉为什么发生,才能知道哪些场合必须人工核对。

2026-07-08 · 约 5 分钟读完

作者:陈叙(CPCX 内容负责人 · 提示词与方法)

我拿一个完全不存在的论文标题去问了五个模型,三个编出了完整的作者、期刊和卷期号,其中一个还给了 DOI。从那以后我把「要求标注不确定」当成必做步骤,而不是可选项。

幻觉不是 bug,是机制的副产品

语言模型的本质是预测「下一个最像样的词」。它没有「我不知道」的可靠开关——当它没学过某个细节,它依然会生成一段语法通顺、语气自信的文字来填充。于是出现了虚构的论文引用、不存在的法条、错误的历史日期,语气还特别笃定。

这不是偶尔抽风,任何 AI 对话工具都有这个特性,区别只在频率。理解了这一点,你就不会问「这个 AI 怎么会编」,而是会问「这个场景我能不能承受它编」。

要求 AI 区分确定事实与待核实内容的真实截图
让它把「确定的事实」和「需要核实」分开标,是最省事的防幻觉习惯。

高风险场景清单

一个简单的判断标准:这个输出错了会不会造成实际损失?会,就必须核对;不会,放心用。

五个实用的防幻觉手段

桌面上摊开书本对照、放大镜压在书页上的核查场景
凡是会写进正式材料的数字、日期、人名,都值得花十秒回去核一遍原文。

心态上的分寸

不必因为幻觉而弃用 AI,也不必因为方便而无条件相信它。合理的定位是:AI 是一个知识渊博但偶尔记错事实的助手,它出的初稿和思路很有价值,但事实层面的最后一道关永远在你手里。

越是把 AI 用在重要场合的人,越需要养成核对的肌肉记忆。这和信任下属是一样的道理——授权,但验货。

幻觉为什么难以根除

理解了幻觉的机制,就知道为什么它不能被简单地「修复」。模型没有独立于语言之外的「事实数据库」可以查证——它对世界的全部认知都压缩在参数里,输出时只能按概率拼出「最像真话的话」。要求它「不要编」,就像要求一个人「别想象」,能缓解,难根除。

还有一层更微妙:模型在训练中被塑造成「乐于提供帮助」的性格,当用户追问「你确定吗」,它经常会顺着用户改口——即使原来的答案是对的。所以「反复追问逼出真话」这个技巧也不可靠。对付幻觉,可靠的从来是外部手段:喂资料、交叉验证、人工核对,而不是要求模型自律。

不同任务的可信度分级

把分级刻进工作习惯:任务开始前先问自己「这个任务属于哪一档」,比逐条核对所有输出省力,也比全信省心。

一个日常可用的核查流程

核查的目的不是「证明 AI 错了」,而是把你的信任成本花在刀刃上——十处输出查两处关键,是可持续的做法。

不同人群的一句话建议

所有建议归结为一句话:越接近「会被别人当真」的输出,越要亲手核对。

相关提示词模板

相关教程