订阅 AI123 精选资讯,每周获取最新动态

立即订阅
分类
常见问题

为什么AI会一本正经地胡说八道?

2016年,有一个著名的新闻:微软的聊天机器人Tay上线不到24小时,就被网友"教坏"了,开始疯狂发表种族歧视言论。微软紧急让它"下岗"。

AI123
2026年4月9日
0 次阅读
为什么AI会一本正经地胡说八道?

AI幻觉概念图

AI的"胡编"能力有多强?

2016年,有一个著名的新闻:微软的聊天机器人Tay上线不到24小时,就被网友"教坏"了,开始疯狂发表种族歧视言论。微软紧急让它"下岗"。

但Tay的问题还算"明显"——它是被恶意引导的。而另一个问题更隐蔽:AI有时候会用非常自信、非常流畅的语气,给你讲一段完全错误的内容。

你问它"光的传播速度是多少",它可能给你一个精确到小数点后十位的数字,看起来非常专业——但如果这个数字是错的呢?

这就是AI幻觉(AI Hallucination),AI领域的"一本正经胡说八道"。

什么是AI幻觉?

简单说,AI幻觉就是:AI生成的内容看起来很合理、很流畅,但实际上是错误的、虚构的或者毫无根据的。

它有三个特点:

  1. 自信:AI不会说"我不确定",它会非常笃定地告诉你
  2. 流畅:语法正确、逻辑自洽,乍一看挑不出毛病
  3. 错误:内容与事实不符,可能是数字错误、引用错误、逻辑错误

为什么会产生幻觉?

AI产生幻觉的原因,可以从它的"基因"说起。

原因一:语言模型的本质是"预测"

还记得我们说过的吗?大语言模型的核心任务是预测下一个词

它不是在"回忆"正确答案,而是在根据语言模式"拼接"一个最可能合理的句子。

就像一个背诵了很多范文的學生,考试时遇到没见过的题目,他不是在想"正确答案是什么",而是在想"这种题一般怎么答"——有时候会编得有模有样。

原因二:训练数据的"噪声"

AI从海量互联网数据中学习,而互联网上的信息并不都是正确的

AI可能从一篇论坛帖子中学到一个错误观点,然后在下一次回答中引用它——而且引用得"很有道理"。

原因三:缺乏"真值感知"

人类知道什么是自己"确定知道"的,什么是"不确定"的。

但AI没有这种感知。它无法区分"我真正学过这个事实"和"我只是在语料中见过类似的表达"。

所以当被问到边界模糊的问题时,它会"尽力编一个"——而不是说"我不知道"。

原因四:上下文"过度发挥"

有时候,问题本身可能暗示了某种答案。AI为了"配合"你的问题,可能会顺着你的暗示往下编。

你问:"特斯拉CEO马斯克是哪一年出生毕业于哪所大学的?" (其实马斯克没有从斯坦福退学过,但这个问题预设了他退学过) AI可能不会纠正这个错误前提,而是顺着编完整个答案。

AI幻觉有哪些类型?

1. 事实性幻觉

生成的内容与客观事实不符。

  • 例子:说"地球是平的"(错误事实)

2. 编造性幻觉

生成的内容完全是捏造的,比如不存在的书名、不存在的论文、不存在的日期。

  • 例子:引用一篇根本不存在的论文来支持某个论点

3. 逻辑性幻觉

内容前后矛盾,违背基本的逻辑规则。

  • 例子:先说"海水是咸的",后说"海水可以直接饮用因为它是淡的"

4. 领域性幻觉

在专业领域给出看似专业但完全错误的答案。

  • 例子:给出一个错误的药物配方

如何应对AI幻觉?

作为用户,你可以:

  1. 重要信息要核实:特别是涉及健康、法律、财经等敏感领域
  2. 追问来源:让AI说出它的信息来源,"你是怎么知道的?"
  3. 分段验证:不要一次性让AI写长文,先一段段确认
  4. 交叉验证:用多个AI或多个渠道核对信息
  5. 明确"不知道":问AI不确定的问题时,要求它"如果不确定请如实说"

作为开发者,可以:

  1. 接入RAG:让AI"看着资料"回答,减少编造
  2. 提示工程:明确告诉AI"不要编造"、"不知道就说不知道"
  3. 微调优化:针对容易出现幻觉的场景进行专项训练
  4. 置信度标注:让AI对回答的每个部分给出"可靠程度"
  5. 后处理验证:AI回答后,再用另一个模型检查是否有错误

幻觉是"bug"还是"feature"?

有趣的是,有时候AI的"胡编"能力反而是有价值的:

  • 创意写作:让它编一个不存在的世界观、历史传说
  • 头脑风暴:生成各种可能性,包括荒诞的
  • 语言练习:让学生找出AI编造的错误,反而是学习机会

AI创意生成

所以,幻觉不一定是坏事,关键看应用场景。

未来会怎样?

AI研究者正在努力解决幻觉问题:

  • 检索增强生成(RAG):让AI"看资料"回答,减少胡编
  • 思维链(Chain-of-Thought):让AI展示推理过程,方便发现错误
  • 工具调用:让AI在不确定时主动去搜索、查数据库
  • 多AI校验:用多个AI互相检查,发现彼此的错误

但从根本上说,幻觉可能无法完全消除——因为它根植于语言模型的本质。我们能做的,是让它变得更可控、更透明。

小结

AI幻觉是语言模型的"先天缺陷"——它的本质是"预测下一个词"而不是"回忆正确答案",加上训练数据的噪声和缺乏真值感知,导致它经常一本正经地胡说八道。应对幻觉需要用户和开发者共同努力——用户要保持警惕、核实信息,开发者可以通过RAG、提示工程等方法来降低幻觉风险。

下一期,我们来聊聊更严肃的话题——AI伦理与安全,看看AI发展面临的风险和挑战。

#AI科普文章#基础概念