AI 会一本正经地胡说八道:幻觉是什么,怎么防

AI 编造数据、虚构文献、张冠李戴不是故障而是机制。理解幻觉为什么发生,才能知道哪些场合必须人工核对。

2026-07-08 · 约 6 分钟读完

幻觉不是 bug,是机制的副产品

语言模型的本质是预测「下一个最像样的词」。它没有「我不知道」的可靠开关——当它没学过某个细节,它依然会生成一段语法通顺、语气自信的文字来填充。于是出现了虚构的论文引用、不存在的法条、错误的历史日期,语气还特别笃定。

这不是偶尔抽风,任何 AI 对话工具都有这个特性,区别只在频率。理解了这一点,你就不会问「这个 AI 怎么会编」,而是会问「这个场景我能不能承受它编」。

高风险场景清单

一个简单的判断标准:这个输出错了会不会造成实际损失?会,就必须核对;不会,放心用。

五个实用的防幻觉手段

心态上的分寸

不必因为幻觉而弃用 AI,也不必因为方便而无条件相信它。合理的定位是:AI 是一个知识渊博但偶尔记错事实的助手,它出的初稿和思路很有价值,但事实层面的最后一道关永远在你手里。

越是把 AI 用在重要场合的人,越需要养成核对的肌肉记忆。这和信任下属是一样的道理——授权,但验货。

幻觉为什么难以根除

理解了幻觉的机制,就知道为什么它不能被简单地「修复」。模型没有独立于语言之外的「事实数据库」可以查证——它对世界的全部认知都压缩在参数里,输出时只能按概率拼出「最像真话的话」。要求它「不要编」,就像要求一个人「别想象」,能缓解,难根除。

还有一层更微妙:模型在训练中被塑造成「乐于提供帮助」的性格,当用户追问「你确定吗」,它经常会顺着用户改口——即使原来的答案是对的。所以「反复追问逼出真话」这个技巧也不可靠。对付幻觉,可靠的从来是外部手段:喂资料、交叉验证、人工核对,而不是要求模型自律。

不同任务的可信度分级

把分级刻进工作习惯:任务开始前先问自己「这个任务属于哪一档」,比逐条核对所有输出省力,也比全信省心。

一个日常可用的核查流程

核查的目的不是「证明 AI 错了」,而是把你的信任成本花在刀刃上——十处输出查两处关键,是可持续的做法。

不同人群的一句话建议

所有建议归结为一句话:越接近「会被别人当真」的输出,越要亲手核对。

相关提示词模板

相关教程