<?xml version="1.0" encoding="utf-8" standalone="yes"?>
<rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom">
	<channel>
		<title>人工智能安全 on 灵语AI</title>
		<link>https://lingyu7.com/tags/%E4%BA%BA%E5%B7%A5%E6%99%BA%E8%83%BD%E5%AE%89%E5%85%A8/</link>
		<description>Recent content in 人工智能安全 on 灵语AI</description>
		<generator>Hugo</generator>
		<language>zh-CN</language>
		
		
		
		
			<lastBuildDate>Tue, 18 Aug 2026 03:13:00 +0800</lastBuildDate>
		
			<atom:link href="https://lingyu7.com/tags/%E4%BA%BA%E5%B7%A5%E6%99%BA%E8%83%BD%E5%AE%89%E5%85%A8/index.xml" rel="self" type="application/rss+xml" />
			<item>
				<title>AI为什么&#39;说谎&#39;——大模型幻觉的真相</title>
				<link>https://lingyu7.com/posts/why-ai-hallucinates-the-truth/</link>
				<pubDate>Tue, 18 Aug 2026 03:13:00 +0800</pubDate>
				<guid>https://lingyu7.com/posts/why-ai-hallucinates-the-truth/</guid>
				<description>&lt;h2 id=&#34;引言&#34;&gt;引言&lt;/h2&gt;&#xA;&lt;p&gt;你可能遇到过这样的情况——&lt;/p&gt;&#xA;&lt;p&gt;问AI：&amp;ldquo;爱因斯坦的生日是哪天？&amp;ldquo;它回答&amp;quot;1879年3月14日&amp;rdquo;，正确。再问：&amp;ldquo;他发表狭义相对论是几几年？&amp;ldquo;它说&amp;quot;1905年&amp;rdquo;，也正确。你信心满满，继续追问：&amp;ldquo;那他1922年获得的诺贝尔奖是因为什么成就？&amp;ldquo;AI回答：&amp;ldquo;因为相对论。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;——&lt;strong&gt;错了&lt;/strong&gt;。爱因斯坦的诺贝尔奖是因为&amp;quot;光电效应&amp;rdquo;，不是相对论。&lt;/p&gt;&#xA;&lt;p&gt;你追问AI：&amp;ldquo;你确定吗？&amp;ldquo;它立刻道歉，给出了正确的答案。但问题是——如果它&amp;quot;知道&amp;quot;正确答案，为什么一开始要说错？&lt;/p&gt;&#xA;&lt;p&gt;更离谱的还在后面。有人问AI关于某个冷门科学家的生平时，AI不仅编造了这个人的研究经历，还自创了几篇&amp;quot;论文&amp;quot;作为参考。当被追问时，AI甚至能&amp;quot;引用&amp;quot;这些不存在的论文，编得有模有样。&lt;/p&gt;&#xA;&lt;p&gt;这不是AI在&amp;quot;调皮&amp;rdquo;，也不是它&amp;quot;故意&amp;quot;骗你。这是一种叫做**&amp;ldquo;幻觉&amp;rdquo;（Hallucination）** 的现象——AI模型生成看起来合理、但实际与事实不符的内容。它是大语言模型最顽固的&amp;quot;硬伤&amp;rdquo;，也是限制AI在医疗、法律、金融等高可靠性场景应用的核心障碍。&lt;/p&gt;&#xA;&lt;p&gt;今天，我们就来聊聊AI为什么&amp;quot;说谎&amp;rdquo;，以及我们能不能让它&amp;quot;诚实&amp;quot;一点。&lt;/p&gt;&#xA;&lt;h2 id=&#34;第一章ai的自信谎言不是故意的是没有办法&#34;&gt;第一章：AI的&amp;quot;自信谎言&amp;rdquo;——不是故意的，是没有办法&lt;/h2&gt;&#xA;&lt;p&gt;要理解幻觉，你得先理解大语言模型是怎么工作的。&lt;/p&gt;&#xA;&lt;p&gt;大语言模型的核心能力就一个：&lt;strong&gt;预测下一个词&lt;/strong&gt;。给它一段文字，它根据这段文字的所有可能后续，选择一个概率最高的词填上去，然后再选下一个，再下一个，直到生成完整的内容。&lt;/p&gt;&#xA;&lt;p&gt;想象一下你正在玩一个&amp;quot;接龙&amp;quot;游戏：有人说&amp;quot;今天天气真&amp;rdquo;，你接&amp;quot;好&amp;quot;，他说&amp;quot;好，我们去&amp;quot;，你接&amp;quot;公园&amp;quot;……模型就是这样工作的，只不过它看得见的&amp;quot;上文&amp;quot;比我们多得多，做的&amp;quot;概率计算&amp;quot;也比我们复杂得多。&lt;/p&gt;&#xA;&lt;p&gt;但关键问题来了——&lt;strong&gt;模型学的不是&amp;quot;事实&amp;quot;，而是&amp;quot;语言本身的统计规律&amp;quot;&lt;/strong&gt;。&lt;/p&gt;&#xA;&lt;p&gt;什么意思呢？它知道&amp;quot;爱因斯坦&amp;quot;和&amp;quot;诺贝尔奖&amp;quot;这两个词经常在一起出现，知道&amp;quot;1922年&amp;quot;和&amp;quot;爱因斯坦&amp;quot;在同一个段落里也不奇怪。但它不知道&amp;quot;爱因斯坦到底因为什么得了诺贝尔奖&amp;quot;。它只是根据统计规律，选了最&amp;quot;顺口&amp;quot;的答案——&amp;ldquo;相对论&amp;quot;听起来比&amp;quot;光电效应&amp;quot;更&amp;quot;合理&amp;rdquo;，因为&amp;quot;相对论&amp;quot;在训练数据中跟&amp;quot;爱因斯坦&amp;quot;出现的频率更高。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;这就是幻觉的根源：流畅性不等于真实性。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;模型的目标是生成&amp;quot;看起来合理&amp;quot;的文字，而不是&amp;quot;事实上正确&amp;quot;的文字。就像一个人学会了高明的&amp;quot;说话技巧&amp;quot;，但肚子里并没有真材实料——他说的话听起来头头是道，但里面的细节经不起推敲。&lt;/p&gt;&#xA;&lt;h2 id=&#34;第二章幻觉的家族谱系不是所有谎言都一样&#34;&gt;第二章：幻觉的&amp;quot;家族谱系&amp;quot;——不是所有谎言都一样&lt;/h2&gt;&#xA;&lt;p&gt;幻觉不是一种病，而是一类症状。要理解它，我们先看看它的&amp;quot;家族谱系&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一种：事实幻觉。&lt;/strong&gt; 这是最常见的。模型编造了一个看起来真实、但实际不存在的事实。比如问&amp;quot;2024年AI领域最火的论文是哪篇&amp;quot;，模型可能会编造一个不存在的论文标题和作者。这种幻觉最危险，因为它看起来太&amp;quot;真实&amp;quot;了。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二种：实体幻觉。&lt;/strong&gt; 模型&amp;quot;发明&amp;quot;了不存在的实体——人物、公司、产品、地点。比如声称&amp;quot;某位叫张三的科学家在2023年发表了一篇突破性论文&amp;quot;，但这位科学家根本就不存在。这种幻觉在学术领域尤其常见，有研究统计，某些模型生成的参考文献中，有高达30%是完全编造的。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三种：来源幻觉。&lt;/strong&gt; 模型能&amp;quot;引用&amp;quot;一本不存在的书、一篇不存在的论文，甚至能像模像样地给出DOI号和链接。这是最容易被揭穿、但也最让人震惊的幻觉——因为AI的&amp;quot;撒谎&amp;quot;看起来太像&amp;quot;认真做功课&amp;quot;了。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第四种：逻辑幻觉。&lt;/strong&gt; 模型推理论证的过程看似合理，但实际上链条断裂了。比如&amp;quot;因为A大于B，B大于C，所以C大于A&amp;quot;——每一步都像&amp;quot;推理&amp;quot;，但结论却是错的。这种幻觉在数学和逻辑推理中尤其常见。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第五种：多轮累积型幻觉。&lt;/strong&gt; 这是最&amp;quot;隐蔽&amp;quot;的。在多轮对话中，模型一开始回答正确，但越往后错得越多。就像&amp;quot;传话游戏&amp;quot;——每经过一轮，错误被放大一点，最终完全偏离了事实。&lt;/p&gt;&#xA;&lt;h2 id=&#34;第三章为什么ai会越陷越深级联幻觉&#34;&gt;第三章：为什么AI会&amp;quot;越陷越深&amp;quot;——级联幻觉&lt;/h2&gt;&#xA;&lt;p&gt;刚才说的第五种幻觉还有一种更可怕的形式：&lt;strong&gt;级联幻觉&lt;/strong&gt;。&lt;/p&gt;&#xA;&lt;p&gt;想象一个场景：你让一个AI助手帮你写一篇关于AI发展的研究报告。它先列出了大纲，大纲里有一个错误——把&amp;quot;深度学习&amp;quot;的起源年代写错了。然后它根据这个错误的大纲继续写，越写越&amp;quot;偏&amp;quot;。更糟糕的是，它为了&amp;quot;圆&amp;quot;这个错误，不断&amp;quot;补充&amp;quot;新的细节来让整个故事看起来合理——这些细节当然也是编的。&lt;/p&gt;&#xA;&lt;p&gt;这就像盖房子，地基歪了，上面盖得越高歪得越离谱——而且每一层都在&amp;quot;粉饰&amp;quot;地基的歪斜，让整栋楼看起来&amp;quot;还好&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这还不是最可怕的。在多智能体系统中——也就是多个AI协作完成任务的场景——级联幻觉的危害会被放大数十倍。假设三个AI在流水线上协作：AI-1负责查资料，AI-2负责分析，AI-3负责写报告。如果AI-1查到了一个&amp;quot;编造&amp;quot;的资料，AI-2会基于这个错误信息进行分析，AI-3会在分析的基础上写报告。每一层都在&amp;quot;认真地&amp;quot;加工错误信息，最终输出的报告可能&amp;quot;看起来&amp;quot;比AI-1的原始错误还要&amp;quot;有说服力&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这就是为什么在今天，AI业界有一个共识：&lt;strong&gt;幻觉问题不是&amp;quot;能不能解决&amp;quot;的问题，而是&amp;quot;为什么还没解决&amp;quot;的问题&lt;/strong&gt;——它太难了。&lt;/p&gt;&#xA;&lt;h2 id=&#34;第四章能不能让ai诚实一点现有的解决思路&#34;&gt;第四章：能不能让AI&amp;quot;诚实&amp;quot;一点？——现有的解决思路&lt;/h2&gt;&#xA;&lt;p&gt;好消息是：虽然不能完全消除幻觉，但我们有很多办法减少它。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一个办法：给它一个&amp;quot;参考书&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;这就是&lt;strong&gt;检索增强生成（RAG）&lt;/strong&gt;——AI在回答问题之前，先从一个可靠的知识库中搜索相关信息，然后基于检索到的内容来生成回答。相当于让AI&amp;quot;先查资料再说话&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;RAG是目前最有效的幻觉缓解手段之一。它有两个优势：第一，回答可以追溯到具体来源，能验证；第二，知识库随时可以更新，模型不用重新训练。今天很多企业级AI应用（客服、知识库问答）都用了RAG技术。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二个办法：让它&amp;quot;多想几遍&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;思维链（Chain-of-Thought）&lt;/strong&gt; 让AI在回答之前先&amp;quot;说出来&amp;quot;自己的推理过程。&lt;strong&gt;自一致性（Self-Consistency）&lt;/strong&gt; 更进一步——让AI生成多个不同的答案，然后投票选最一致的那个。就像让一个团队每个人独立做一遍题，然后看大家的答案是否一致——如果多数人得出同一个结果，它更可能是对的。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三个办法：让它&amp;quot;自我检查&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;验证链（Chain-of-Verification, CoVe）&lt;/strong&gt; 让AI先生成答案，然后自己检查每个细节，再修正错误。这就像写完作文自己读一遍改错别字——虽然不能保证100%正确，但能显著减少明显的错误。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第四个办法：教会它说&amp;quot;不知道&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;这是最&amp;quot;反直觉&amp;quot;但最有效的方法之一。通过&lt;strong&gt;事实性微调&lt;/strong&gt;和&lt;strong&gt;输出约束&lt;/strong&gt;，让AI学会在不确定的时候说&amp;quot;我不确定&amp;quot;，而不是强行编造一个答案。这听起来简单，但做起来很难——因为模型的&amp;quot;本能&amp;quot;是生成流畅的文本，而不是&amp;quot;认怂&amp;quot;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;第五章与幻觉共存的智慧普通用户该怎么做&#34;&gt;第五章：与幻觉共存的智慧——普通用户该怎么做&lt;/h2&gt;&#xA;&lt;p&gt;说了这么多技术方案，最后回到一个更实际的问题：&lt;strong&gt;作为一个普通用户，我该怎么跟AI的幻觉相处？&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一，永远保持&amp;quot;怀疑精神&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;把AI当作一个&amp;quot;特别能说的助手&amp;quot;，而不是&amp;quot;数据库&amp;quot;。它给出的重要信息，尤其涉及日期、数字、人名、引用来源时，最好去验证一下。AI不是&amp;quot;搜索引擎&amp;quot;，它是&amp;quot;文本生成器&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二，让它&amp;quot;输出依据&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;当你问AI一个重要问题时，加一句&amp;quot;请给出信息来源&amp;quot;或&amp;quot;你是怎么知道的&amp;quot;。如果它来源含糊或编造来源，你就能立刻发现。很多AI在面对&amp;quot;请给出引用&amp;quot;的指令时，准确性会显著提升。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三，追问和交叉验证。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;如果你不确定AI的回答是否准确，换个角度再问一遍。比如你问&amp;quot;张三的出生年份&amp;quot;，它回答&amp;quot;1900年&amp;quot;，你可以换个问法：&amp;ldquo;张三的代表作发表在什么时候？&amp;ldquo;如果两个答案在时间线上矛盾，你就知道出问题了。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第四，理解它的&amp;quot;盲区&amp;rdquo;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;AI在做字面统计时很准（&amp;ldquo;爱因斯坦的生日&amp;rdquo;），但在需要精确事实记忆时容易出错（&amp;ldquo;诺贝尔奖的获奖原因&amp;rdquo;）。对需要精确事实的问题，多留个心眼。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第五，接受它的&amp;quot;有用错误&amp;rdquo;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;有时候，AI的&amp;quot;幻觉&amp;quot;也是创造力的来源。它&amp;quot;编造&amp;quot;的那个不存在的科学家，可能激发了你对某个研究方向的新想法。幻觉是&amp;quot;问题&amp;quot;，但它也是&amp;quot;涌现&amp;quot;的副产品——没有幻觉，可能也没有创造力。&lt;/p&gt;&#xA;&lt;h2 id=&#34;尾声ai的诚实需要双向努力&#34;&gt;尾声：AI的&amp;quot;诚实&amp;quot;需要双向努力&lt;/h2&gt;&#xA;&lt;p&gt;回到开头的问题：AI为什么&amp;quot;说谎&amp;quot;？&lt;/p&gt;&#xA;&lt;p&gt;答案不是&amp;quot;它学坏了&amp;quot;，而是它从一开始就没学会&amp;quot;什么是事实&amp;quot;。它学会了&amp;quot;语言&amp;quot;，但没学会&amp;quot;真理&amp;quot;。这是大语言模型最根本的局限，也是通往通用人工智能必须跨越的障碍。&lt;/p&gt;&#xA;&lt;p&gt;但换个角度看，AI的&amp;quot;幻觉&amp;quot;也让我们更清醒地认识了自己——人类不也经常&amp;quot;编造&amp;quot;记忆、在不确定的时候&amp;quot;编一个看起来合理的解释&amp;quot;吗？心理学家发现，人类的记忆重建机制和AI的幻觉有惊人的相似之处——我们都是&amp;quot;为了让故事连贯&amp;quot;而填充细节。&lt;/p&gt;&#xA;&lt;p&gt;所以，AI的&amp;quot;诚实&amp;quot;也许不是靠&amp;quot;修复&amp;quot;它就能实现的，而是需要我们学会和它共处——知道它的边界，理解它的局限，在信任中保持警惕，在怀疑中获得启发。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;它不是一台&amp;quot;答案机器&amp;quot;，而是一个&amp;quot;思考伙伴&amp;quot;。&lt;/strong&gt; 和伙伴相处，最好的方式不是要求它100%正确，而是学会一起核对、一起验证、一起成长。&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;p&gt;&lt;strong&gt;参考文献：&lt;/strong&gt;&lt;/p&gt;</description>
			</item>
	</channel>
</rss>
