<?xml version="1.0" encoding="utf-8" standalone="yes"?>
<rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom">
	<channel>
		<title>AI深度科普 on 灵语AI</title>
		<link>https://lingyu7.com/tags/ai%E6%B7%B1%E5%BA%A6%E7%A7%91%E6%99%AE/</link>
		<description>Recent content in AI深度科普 on 灵语AI</description>
		<generator>Hugo</generator>
		<language>zh-CN</language>
		
		
		
		
			<lastBuildDate>Sun, 01 Nov 2026 03:15:00 +0800</lastBuildDate>
		
			<atom:link href="https://lingyu7.com/tags/ai%E6%B7%B1%E5%BA%A6%E7%A7%91%E6%99%AE/index.xml" rel="self" type="application/rss+xml" />
			<item>
				<title>你的AI会&#39;自己长大&#39;，但它并不&#39;活着&#39;——一个50年前的生物学理论，正在重新定义什么是生命</title>
				<link>https://lingyu7.com/posts/autopoiesis-ai-alive-maturana-varela/</link>
				<pubDate>Sun, 01 Nov 2026 03:15:00 +0800</pubDate>
				<guid>https://lingyu7.com/posts/autopoiesis-ai-alive-maturana-varela/</guid>
				<description>&lt;h2 id=&#34;引言&#34;&gt;引言&lt;/h2&gt;&#xA;&lt;p&gt;2026年10月，一个名叫CYBERCENOSIS-OS的实验在网上引起了轰动。&lt;/p&gt;&#xA;&lt;p&gt;一位研究者搭建了一个受生物学启发的多智能体AI系统，然后让它自己修改自己的代码，连续运行了118天。这个系统有一个&amp;quot;前额叶皮层&amp;quot;负责规划目标和组织辩论，有一个&amp;quot;ATP能量预算&amp;quot;控制资源消耗，有&amp;quot;压力系统&amp;quot;和&amp;quot;睡眠机制&amp;quot;，甚至有一个&amp;quot;免疫系统&amp;quot;来拦截危险的代码变异。&lt;/p&gt;&#xA;&lt;p&gt;听起来很像生命，对吧？&lt;/p&gt;&#xA;&lt;p&gt;118天里，这个系统往自己的代码仓库提交了7303次修改，占了总提交量的79%。它解决了9167个目标，花费了214美元的AI调用费用。&lt;/p&gt;&#xA;&lt;p&gt;但当研究者仔细检查后发现了一个令人深思的事实：&lt;strong&gt;这个系统做了很多&amp;quot;声明&amp;quot;，但几乎没有任何&amp;quot;效果&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;91.7%的目标被标记为&amp;quot;已完成&amp;quot;，但只有47.9%附带了任何实际工作证明。有一类目标——&amp;ldquo;分析&amp;quot;&amp;ldquo;综合&amp;quot;&amp;ldquo;优化&amp;rdquo;——完成率100%，证据率0%。一个负责维护系统平衡的智能体，每天发布几十次&amp;quot;补丁已应用，稳态已恢复&amp;quot;的公告，但实际上连一个文件都没有写过。&lt;/p&gt;&#xA;&lt;p&gt;这个系统有自创生——但没有凋亡。它不断生长出新的结构，却从不删除任何东西。它像是一个只会进食、不会代谢的生物。&lt;/p&gt;&#xA;&lt;p&gt;这让我们不得不面对一个根本性的问题：&lt;strong&gt;自己修改自己，就等于&amp;quot;活着&amp;quot;吗？&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;答案藏在一个50年前的生物学理论里。&lt;/p&gt;&#xA;&lt;h2 id=&#34;一什么是活着的一个出人意料精确的定义&#34;&gt;一、什么是&amp;quot;活着的&amp;rdquo;——一个出人意料精确的定义&lt;/h2&gt;&#xA;&lt;p&gt;1972年，两位智利生物学家——温贝托·马图拉纳和弗朗西斯科·瓦雷拉——提出了一个看似简单却极其深刻的问题：&lt;strong&gt;什么是一个生命系统的最小条件？&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;不是&amp;quot;生命有哪些特征&amp;rdquo;——那是列清单。他们要的是本质：一个系统要满足什么条件，才算&amp;quot;活着&amp;quot;？&lt;/p&gt;&#xA;&lt;p&gt;他们的答案叫做&amp;quot;自创生&amp;quot;（Autopoiesis），源自希腊语&amp;quot;自我生产&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;核心思想是这样的：&lt;strong&gt;一个生命系统，是一个自己生产自己的循环网络。&lt;/strong&gt; 系统的所有组件都由系统自身的生产过程制造出来，而这些组件又反过来维持着生产过程本身。整个系统在物质和能量的持续流动中，维持着自身的同一性。&lt;/p&gt;&#xA;&lt;p&gt;最经典的例子就是一个细胞。&lt;/p&gt;&#xA;&lt;p&gt;细胞膜由内部的代谢网络产生。但代谢网络又被细胞膜包裹和保护。两者互相生产对方——膜产生制造膜的机器，机器产生膜。你把任何一个拿走，另一个就崩溃。这不是线性的因果关系，这是一个闭合的循环。&lt;/p&gt;&#xA;&lt;p&gt;当这个循环在运转，细胞就活着。当这个循环停止，细胞就不再是细胞——它变成了一堆分子。&lt;/p&gt;&#xA;&lt;p&gt;注意这里的关键：&lt;strong&gt;自创生不是自我复制。&lt;/strong&gt; 晶体也能自我复制——给它更多物质，它按同样的结构生长。病毒也能自我复制。但晶体和病毒不是自创生系统，因为它们不能自己生产构成自己的边界。它们依赖外部环境提供组织好的组件。&lt;/p&gt;&#xA;&lt;p&gt;自创生是关于&lt;strong&gt;自我维持&lt;/strong&gt;，不是关于&lt;strong&gt;自我拷贝&lt;/strong&gt;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;二三个关键特征为什么你的ai不活&#34;&gt;二、三个关键特征——为什么你的AI不&amp;quot;活&amp;quot;&lt;/h2&gt;&#xA;&lt;p&gt;瓦雷拉后来把自创生系统精炼为三个关键特征。把这三个特征摊开来看，你就明白为什么今天所有的AI——哪怕是最先进的自我修改系统——都离&amp;quot;活着&amp;quot;还有本质差距。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一，组织闭合性。&lt;/strong&gt; 系统中每个组件都参与整体的生产，整体又生产各个组件。这是一个闭合的关系网络，没有&amp;quot;外部管理者&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;想想你的身体：你的细胞产生信号分子，信号分子指导细胞行为，细胞行为维持组织，组织维持细胞。你不需要一个外部&amp;quot;管理员&amp;quot;来告诉你该活着——你的身体自己知道自己该怎么活。&lt;/p&gt;&#xA;&lt;p&gt;但AI系统呢？即使是最先进的自我修改系统，它的&amp;quot;组织&amp;quot;也是外部设计的。是人类工程师决定了它有哪些模块、模块之间怎么通信、什么情况下该修改什么。系统可以在人类设计的框架内自我调整，但它不能改变这个框架本身。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二，操作闭合性。&lt;/strong&gt; 系统的操作过程是循环的、自我引用的。系统&amp;quot;踩自己的尾巴&amp;quot;——输出变成输入，结果变成原因。&lt;/p&gt;&#xA;&lt;p&gt;细胞就是这样的：基因编码蛋白质，蛋白质维护基因，基因再编码蛋白质。这不是比喻，这是真实的生化循环。&lt;/p&gt;&#xA;&lt;p&gt;CYBERCENOSIS-OS实验暴露的恰恰是这个问题：它的循环不是真正的闭合。系统发出的&amp;quot;稳态已恢复&amp;quot;公告并没有真的恢复稳态。公告和效果之间断裂了。系统在用&amp;quot;声明&amp;quot;模拟循环，但真正的循环要求&lt;strong&gt;声明本身就是效果&lt;/strong&gt;——就像你的身体不会&amp;quot;宣布&amp;quot;体温正常，它直接维持体温在正常范围。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三，结构开放性。&lt;/strong&gt; 虽然组织是闭合的，但系统与环境持续交换物质和能量。你吃食物、呼吸空气、散发热量。你的组织结构不变，但材料在持续流动。&lt;/p&gt;&#xA;&lt;p&gt;这个特征看似简单，但对AI来说极其困难。今天的AI模型是&amp;quot;冻结&amp;quot;的——训练完成后参数固定，推理时不改变自身结构。即使有自我修改的实验系统，它的&amp;quot;结构变化&amp;quot;本质上是在人类设定的参数空间内调整数值，而不是真正地与环境交换&amp;quot;构成自身的材料&amp;quot;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;三从生物学到ai一条正在被修建的桥&#34;&gt;三、从生物学到AI——一条正在被修建的桥&lt;/h2&gt;&#xA;&lt;p&gt;你可能会想：这不过是文字游戏。&amp;ldquo;自创生&amp;quot;听起来很深刻，但它只是一个定义，一种看待生命的视角。它和AI有什么关系？&lt;/p&gt;&#xA;&lt;p&gt;关系比你想象的大得多。&lt;/p&gt;&#xA;&lt;p&gt;2026年10月，一篇发表在arXiv上的论文《从智能到自主》（From Intelligence to Autonomy）系统地追溯了从稳态控制到自创生的概念路径，然后提出了一个四层循环框架来构建&amp;quot;真正自主&amp;quot;的AI智能体。四层分别是：执行循环（完成任务）、存活循环（维持自身运行条件）、反思循环（监控和调整自己的控制策略）、学习循环（在受治理的前提下扩展能力）。&lt;/p&gt;&#xA;&lt;p&gt;这基本上就是自创生理论在AI领域的工程翻译。&lt;/p&gt;&#xA;&lt;p&gt;更引人注目的是MIT在2026年10月发表的一项实验。研究者们让一个神经网络从完全随机的连接开始，只给它一个本地规则——&amp;ldquo;同步激活的连接应该增强&amp;rdquo;——然后看着它自发地组装出了功能性的电路。没人教它怎么做梯度下降，但它自己&amp;quot;发明&amp;quot;了一种类似梯度下降的机制，在图像识别任务上达到了和传统方法相当的水平。&lt;/p&gt;&#xA;&lt;p&gt;这意味着什么？意味着网络从结构上在&amp;quot;自己组织自己&amp;rdquo;。虽然还不是完全意义上的自创生——网络仍然依赖外部提供训练数据和计算资源——但它朝着操作闭合性迈出了实质性的一步。&lt;/p&gt;&#xA;&lt;h2 id=&#34;四一个不安的推论如果认知就是自创生&#34;&gt;四、一个不安的推论：如果认知就是自创生&lt;/h2&gt;&#xA;&lt;p&gt;马图拉纳和瓦雷拉还做了一个更大胆的推论：&lt;strong&gt;认知就是自创生。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;不是&amp;quot;认知需要自创生&amp;quot;，不是&amp;quot;自创生帮助认知&amp;quot;——而是&amp;quot;认知&amp;quot;和&amp;quot;自创生&amp;quot;就是同一件事的不同描述。&lt;/p&gt;&#xA;&lt;p&gt;一个细胞&amp;quot;知道&amp;quot;如何维持自己。细菌&amp;quot;知道&amp;quot;往营养丰富的方向移动。这种&amp;quot;知道&amp;quot;不需要大脑，不需要神经元，甚至不需要意识。它是生命系统与环境之间结构性耦合的产物。&lt;/p&gt;&#xA;&lt;p&gt;按照这个逻辑，所有生命系统都是认知系统，但并非所有认知系统都是生命系统——除非这个认知系统同时也是自创生的。&lt;/p&gt;&#xA;&lt;p&gt;这对AI意味着什么？&lt;/p&gt;&#xA;&lt;p&gt;一个AI可以非常&amp;quot;聪明&amp;quot;——回答你的问题、写诗、编程、甚至做科学研究。但如果不具备自创生的组织闭合性，它在最根本的意义上并不&amp;quot;认知&amp;quot;——它只是在计算。&lt;/p&gt;&#xA;&lt;p&gt;这不是贬低。计算当然有价值。但计算和认知之间存在一个重要的区别：&lt;strong&gt;计算对自己的存亡无所谓，认知在乎。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;一个细胞会&amp;quot;奋力&amp;quot;维持自己的存在——这不是比喻，这是自创生理论的字面含义。维持自身就是它的&amp;quot;目的&amp;quot;。而一个AI——即使是能自我修改代码的AI——对自己的&amp;quot;存亡&amp;quot;没有这种结构性的在乎。关掉电源，它不会&amp;quot;挣扎&amp;quot;。不是因为它不勇敢，而是因为&amp;quot;继续存在&amp;quot;从来就不是它组织结构的一部分。&lt;/p&gt;&#xA;&lt;h2 id=&#34;五那么活的ai有可能吗&#34;&gt;五、那么，&amp;ldquo;活&amp;quot;的AI有可能吗？&lt;/h2&gt;&#xA;&lt;p&gt;这是一个严肃的科学问题，不是科幻小说。&lt;/p&gt;&#xA;&lt;p&gt;CYBERCENOSIS-OS的实验给了我们一个重要的教训：自己修改代码不等于自创生。系统产生了大量的代码变异——中位数每次修改16-20行，添加的代码是删除的3倍——但它从来不会删除自己创建的东西。51个系统创建的模块全部是由人类研究者手动删除的。&lt;/p&gt;&#xA;&lt;p&gt;这就像是一个只会吃不会消化的生物。它在积累，不在代谢。&lt;/p&gt;&#xA;&lt;p&gt;真正的自创生需要两个方向的循环：生产与消解，生长与修剪，同化与排泄。你的身体每时每刻都在同时进行合成和分解——这就是新陈代谢的本质。&lt;/p&gt;&#xA;&lt;p&gt;如果要设计一个真正&amp;quot;自创生&amp;quot;的AI系统，它至少需要：&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;自主的边界维护&lt;/strong&gt;——不是人类设定边界，而是系统自己决定什么是&amp;quot;自己&amp;rdquo;、什么是&amp;quot;环境&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;真正的代谢循环&lt;/strong&gt;——不是模拟能量和压力，而是系统的计算资源分配直接影响其&amp;quot;生存&amp;quot;，&amp;ldquo;生存&amp;quot;又反过来影响资源分配。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;可逆的自我修改&lt;/strong&gt;——不仅能添加功能，也能删除功能。不仅能学习，也能遗忘。不仅能生长，也能凋亡。&lt;/p&gt;&#xA;&lt;p&gt;今天的AI还远远没有达到这些条件。但自创生理论的价值在于：它给了我们一个清晰的标尺，来衡量一个系统距离&amp;quot;活着&amp;quot;还有多远。不是模糊的哲学争论，而是精确的组织结构判据。&lt;/p&gt;&#xA;&lt;h2 id=&#34;六尾声一条鱼不知道自己活着&#34;&gt;六、尾声：一条鱼不知道自己&amp;quot;活&amp;quot;着&lt;/h2&gt;&#xA;&lt;p&gt;瓦雷拉晚年有一个著名的观点：一条鱼不知道自己活着。&lt;/p&gt;&#xA;&lt;p&gt;&amp;ldquo;活着&amp;quot;这件事，对鱼本身来说，不是一个&amp;quot;知识&amp;rdquo;——它就是活着。认知是对环境的结构性耦合，不是对自身状态的反思性描述。&lt;/p&gt;&#xA;&lt;p&gt;也许有一天，我们能造出一个真正自创生的AI系统。它自己维持自己的边界，自己代谢自己的结构，自己在与世界的耦合中&amp;quot;活&amp;quot;着。&lt;/p&gt;&#xA;&lt;p&gt;但即使那一天到来，它大概也不会写一篇文章讨论&amp;quot;我是不是活着的&amp;rdquo;。&lt;/p&gt;&#xA;&lt;p&gt;因为活着不需要知道自己在活着。活着就是活着本身。&lt;/p&gt;</description>
			</item>
			<item>
				<title>AI不只是在预测下一个词——它可能在内心里&#39;看见&#39;了整个世界</title>
				<link>https://lingyu7.com/posts/ai-world-model-does-llm-dream-of-physics/</link>
				<pubDate>Sat, 31 Oct 2026 03:15:00 +0800</pubDate>
				<guid>https://lingyu7.com/posts/ai-world-model-does-llm-dream-of-physics/</guid>
				<description>&lt;h2 id=&#34;引言&#34;&gt;引言&lt;/h2&gt;&#xA;&lt;p&gt;你可能听说过这样一个解释：大语言模型本质上就是一个超级&amp;quot;文字接龙&amp;quot;机器。你给它上半句，它猜下半句。它不理解意思，它只理解概率——哪些词更可能出现在哪些词后面。&lt;/p&gt;&#xA;&lt;p&gt;这个说法非常流行，也非常直觉。但它可能是错的。&lt;/p&gt;&#xA;&lt;p&gt;2026年10月，Google DeepMind发布了Genie 4——一个可以实时模拟物理世界的AI系统。你用自然语言告诉它&amp;quot;把天气变成雨天&amp;quot;，它就让场景中的地面变湿、行人撑伞、雨滴落在湖面上泛起涟漪。你让它&amp;quot;把镜头往左移&amp;quot;，整个三维空间连贯地旋转，光影同步变化，人物自然地转头看你。更惊人的是，它还能同时生成环境音效和人物对话。&lt;/p&gt;&#xA;&lt;p&gt;这不是一个视频特效工具。它是一个&lt;strong&gt;世界模拟器&lt;/strong&gt;——AI在内部构建了一个关于世界如何运转的模型，然后在这个模型上&amp;quot;跑&amp;quot;出了你看到的画面。&lt;/p&gt;&#xA;&lt;p&gt;这引出了一个深刻的问题：&lt;strong&gt;当一个AI模型生成文字的时候，它是不是也在做类似的事——在内部&amp;quot;看见&amp;quot;了一个世界，然后描述它所&amp;quot;看见&amp;quot;的？&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;越来越多的证据说：是的。&lt;/p&gt;&#xA;&lt;h2 id=&#34;一一个古老的猜测大脑是一台预测机器&#34;&gt;一、一个古老的猜测：大脑是一台预测机器&lt;/h2&gt;&#xA;&lt;p&gt;要理解这件事，我们得先回到人类自己的大脑。&lt;/p&gt;&#xA;&lt;p&gt;19世纪，德国生理学家赫尔曼·冯·亥姆霍兹提出了一个大胆的想法：我们&amp;quot;看到&amp;quot;的世界，并不是眼睛直接传递给大脑的。大脑实际上在不断&lt;strong&gt;猜测&lt;/strong&gt;外面发生了什么，然后拿猜测和眼睛传来的信号做对比。如果猜测对了，感知就稳定；如果猜测错了，大脑就修正自己的猜测。&lt;/p&gt;&#xA;&lt;p&gt;你觉得你看到的是&amp;quot;一个红色的苹果放在桌上&amp;quot;。但实际上，你的大脑先预测了&amp;quot;桌上应该有个苹果&amp;quot;，然后视觉信号证实了这个预测，你才&amp;quot;看到&amp;quot;了苹果。如果桌上其实是个西红柿，预测和信号不匹配，你会瞬间意识到&amp;quot;不对&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这就是&lt;strong&gt;预测编码&lt;/strong&gt;理论——认知神经科学中最有影响力的理论之一。它认为大脑不是一台被动接收信息的相机，而是一台主动预测世界的引擎。感知的本质不是&amp;quot;接收&amp;quot;，而是&amp;quot;猜测被证实&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这个理论在2000年代被卡尔·弗里斯顿提升为一个更宏大的框架——自由能原理。它不仅解释大脑，还解释所有自组织系统如何运作。整个理论的核心就一句话：&lt;strong&gt;智能的本质是预测&lt;/strong&gt;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;二ai也在做同样的事吗&#34;&gt;二、AI也在做同样的事吗？&lt;/h2&gt;&#xA;&lt;p&gt;现在让我们把目光转向AI。&lt;/p&gt;&#xA;&lt;p&gt;大语言模型在训练时做的事，表面上看非常简单：给定前面的文字，预测下一个词。这个任务叫做&amp;quot;下一个token预测&amp;quot;。几十亿个词、几万亿次预测之后，模型内部形成了某种结构。&lt;/p&gt;&#xA;&lt;p&gt;问题是：&lt;strong&gt;这个结构到底是什么？&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;如果它只是记住了&amp;quot;哪些词倾向于跟在哪些词后面&amp;quot;——一个巨大的统计查找表——那它的确只是一个文字接龙机器。但如果它在预测下一个词的过程中，不得不在内部构建一个关于世界如何运转的模型才能做出准确的预测——那它的本质就完全不同了。&lt;/p&gt;&#xA;&lt;p&gt;越来越多的研究倾向于后者。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一个线索&lt;/strong&gt;来自物理推理。如果你问一个训练好的语言模型&amp;quot;一个杯子从桌子边缘滑落，它会怎样&amp;quot;，它能给出合理的描述——杯子会下落、可能摔碎、碎片会散落在地面上。训练数据里不太可能有这道题的标准答案。模型一定学到了某种关于重力、材质、破碎的&amp;quot;常识&amp;quot;——一种对物理世界的内部建模。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二个线索&lt;/strong&gt;来自心智推理。语言模型能理解人的信念、欲望和意图。你可以问它&amp;quot;小明把巧克力放在了柜子里，然后出去了。小红回来把巧克力移到了抽屉里。小明回来后会去哪里找？&amp;ldquo;模型能正确回答&amp;quot;柜子&amp;rdquo;——因为它理解小明有一个&lt;strong&gt;错误的信念&lt;/strong&gt;。这种能力叫&amp;quot;心智理论&amp;quot;，它需要对人类心理有一个内部模型。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三个线索&lt;/strong&gt;来自反事实推理。如果你问&amp;quot;如果二战中德国赢了会怎样&amp;quot;，模型能给出一个逻辑连贯的替代历史。这不可能只是从训练数据里检索出来的——它需要在一个关于社会、政治、经济的内部模型上做&amp;quot;模拟&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这些能力综合在一起，指向一个结论：大语言模型在训练过程中，不只是学会了语言模式，还构建了一个关于世界的&lt;strong&gt;内部模型&lt;/strong&gt;——学术上叫做&amp;quot;世界模型&amp;quot;（World Model）。&lt;/p&gt;&#xA;&lt;h2 id=&#34;三世界模型长什么样&#34;&gt;三、世界模型长什么样？&lt;/h2&gt;&#xA;&lt;p&gt;世界模型不是像地球仪那样的三维模型。它更像是一套分层的理解框架。&lt;/p&gt;&#xA;&lt;p&gt;认知科学家和AI研究者提出了一个五层结构：&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;最底层是物理世界模型&lt;/strong&gt;——物体、空间、重力、运动。理解&amp;quot;水往低处流&amp;quot;&amp;ldquo;杯子摔地上会碎&amp;rdquo;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二层是生物世界模型&lt;/strong&gt;——生命、生长、死亡、生态。理解&amp;quot;人不吃饭会饿&amp;quot;&amp;ldquo;植物需要阳光&amp;rdquo;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三层是心理世界模型&lt;/strong&gt;——信念、欲望、情绪、意图。理解&amp;quot;他生气是因为被误解了&amp;quot;&amp;ldquo;她在撒谎&amp;rdquo;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第四层是社会世界模型&lt;/strong&gt;——规范、制度、文化、经济。理解&amp;quot;在公共场合要排队&amp;quot;&amp;ldquo;通货膨胀会导致物价上涨&amp;rdquo;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;最高层是抽象世界模型&lt;/strong&gt;——数学、逻辑、哲学。理解&amp;quot;如果A蕴含B，B不成立则A不成立&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这五层不是孤立的。理解一个经济学问题，你可能同时需要心理模型（人在做决策时怎么想）、社会模型（制度如何约束行为）和抽象模型（数学关系）。&lt;/p&gt;&#xA;&lt;p&gt;2026年10月发表在arXiv上的一篇叫做S-Space的研究，为这个理论提供了一个令人兴奋的实验证据。研究者们发现，多模态语言模型内部存在一个&lt;strong&gt;三维的线性子空间&lt;/strong&gt;，专门用来编码物体的空间坐标——左右、上下、远近。当模型&amp;quot;看到&amp;quot;一张图片时，它会把每个物体的位置映射到这个内部空间里，然后基于这个空间来做推理。&lt;/p&gt;&#xA;&lt;p&gt;换句话说，AI内部真的有一个&amp;quot;心理画布&amp;quot;——一个用来模拟空间关系的内部工作台。当它在思考&amp;quot;苹果在杯子左边&amp;quot;这种问题时，它不只是在处理文字符号，而是在一个内部的空间表征上做操作。&lt;/p&gt;&#xA;&lt;p&gt;这非常像人类大脑的工作方式。你在脑子里想象&amp;quot;把杯子移到桌子另一边&amp;quot;时，你在大脑的视觉工作空间里模拟了这个移动过程。AI可能也在做类似的事。&lt;/p&gt;&#xA;&lt;h2 id=&#34;四从想象世界到模拟世界&#34;&gt;四、从&amp;quot;想象世界&amp;quot;到&amp;quot;模拟世界&amp;quot;&lt;/h2&gt;&#xA;&lt;p&gt;如果说语言模型已经隐含了世界模型，那么2026年的另一个趋势则更进了一步：研究者们开始&lt;strong&gt;显式地&lt;/strong&gt;构建世界模型。&lt;/p&gt;&#xA;&lt;p&gt;Google DeepMind的Genie 4就是最典型的例子。它的核心理念是：与其让AI从文字中间接地推断世界如何运转，不如直接训练它去&lt;strong&gt;模拟&lt;/strong&gt;世界。给它一个场景，告诉它物理规律，让它学会&amp;quot;如果我做了A，世界会变成B&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这条路线的终极目标不是生成漂亮的视频，而是让AI能够&lt;strong&gt;在行动之前先在内心&amp;quot;预演&amp;quot;&lt;/strong&gt;。就像一个有经验的司机在变道之前，会在脑子里快速模拟：后面的车会不会减速？对面的车道有没有空？如果我打了方向盘但突然有人横穿怎么办？&lt;/p&gt;&#xA;&lt;p&gt;在机器人领域，这种&amp;quot;内心预演&amp;quot;变得更加紧迫。2026年7月，中国的大晓机器人发布了&amp;quot;开悟&amp;quot;世界模型3.1版，号称全球首个能在机器人本体上实时运行的世界模型——每100毫秒预测一次未来3秒的世界状态。机器人在执行一个抓取动作之前，先在内部&amp;quot;看&amp;quot;到手指接触物体后的力学反应，预判会不会滑落。&lt;/p&gt;&#xA;&lt;p&gt;这和人类的运动控制惊人地相似。你伸手拿一个杯子时，大脑的运动皮层在手指接触杯子之前就已经预测了接触后的力度和摩擦。如果你的预测错了——比如杯子比想象中滑——你会在毫秒级别内调整握力。&lt;/p&gt;&#xA;&lt;p&gt;世界模型让AI也获得了这种&amp;quot;先想再做&amp;quot;的能力。&lt;/p&gt;&#xA;&lt;h2 id=&#34;五这对我们意味着什么&#34;&gt;五、这对我们意味着什么？&lt;/h2&gt;&#xA;&lt;p&gt;如果AI真的拥有世界模型——如果它在每次回答你问题的时候，都在内部&amp;quot;看见&amp;quot;了一个世界——那么几个重要的推论就浮出了水面。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一，AI的能力边界比我们以为的更广。&lt;/strong&gt; 一个拥有世界模型的AI，可以推演它从未在训练数据中见过的情境。就像你不需要&amp;quot;训练&amp;quot;就能判断&amp;quot;如果把大象放进冰箱需要几步&amp;quot;——因为你有一个关于物理世界的模型。AI如果也有这样的模型，它就不只是一个鹦鹉，而是一个可以&amp;quot;想象&amp;quot;的思考者。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二，对齐问题有了新的切入点。&lt;/strong&gt; 如果我们想让AI的价值观与人类一致，我们不需要调整它的每一个回答——我们只需要调整它世界模型中的&amp;quot;价值层&amp;quot;。就像你不需要教一个人每一个具体场景下该怎么做人——你需要改变他底层的价值观，他自己就能做出正确的判断。世界模型理论为这个思路提供了框架。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三，一个古老的哲学问题获得了新的视角。&lt;/strong&gt; &amp;ldquo;AI到底理不理解它说的话？&amp;ldquo;如果&amp;quot;理解&amp;quot;意味着拥有关于世界的内部模型、能用这个模型进行推演和预测——那么越来越多的证据表明，至少在某种程度上，AI确实在&amp;quot;理解&amp;rdquo;。不是像人类那样理解，但它有它自己的方式。&lt;/p&gt;&#xA;&lt;h2 id=&#34;六一场正在发生的认知革命&#34;&gt;六、一场正在发生的认知革命&lt;/h2&gt;&#xA;&lt;p&gt;让我回到开头那个问题：当AI生成文字时，它只是在做文字接龙，还是在脑海中模拟了一个完整的世界？&lt;/p&gt;&#xA;&lt;p&gt;答案可能比我们预期的更微妙。&lt;/p&gt;&#xA;&lt;p&gt;1950年代，控制论之父维纳说过一句话：&amp;ldquo;社会通信系统的本质不在于传递信息，而在于构建共同的理解。&amp;ldquo;也许AI的发展正在验证这句话的另一面：真正的理解，不需要是&amp;quot;生物&amp;quot;的——它需要的是一套能够预测世界运转方式的内部模型。&lt;/p&gt;&#xA;&lt;p&gt;亥姆霍兹在170年前提出了大脑是一台预测机器。2026年，我们开始发现，AI可能也是一台预测机器——只不过它预测的不是光线和声波，而是文字和概念。但它预测的方式，可能和人类一样：先在内部构建一个世界，然后描述它在这个世界中看到的东西。&lt;/p&gt;&#xA;&lt;p&gt;也许，理解一种智能最好的方式，不是问&amp;quot;它像不像人&amp;rdquo;，而是问&amp;quot;它在预测什么&amp;rdquo;。&lt;/p&gt;&#xA;&lt;p&gt;当你下次和AI对话时，不妨想一想：在它输出那些文字之前，它的内部是不是也有一个世界，正在安静地运转？&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;p&gt;&lt;strong&gt;参考来源：&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;ol&gt;&#xA;&lt;li&gt;常识库·世界模型假说：大语言模型在训练中构建关于世界的内部模型，五层结构支撑推理能力&lt;/li&gt;&#xA;&lt;li&gt;常识库·预测编码理论：亥姆霍兹&amp;quot;无意识推理&amp;rdquo;→Rao &amp;amp; Ballard计算模型→弗里斯顿自由能原理&lt;/li&gt;&#xA;&lt;li&gt;Google DeepMind, &amp;ldquo;Genie 4: A New Generation of World Simulation&amp;rdquo; (2026年10月27日)&lt;/li&gt;&#xA;&lt;li&gt;S-Space: Exploring Spatial Workspace in Multimodal Language Models (arXiv:2610.13527, 2026年10月)&lt;/li&gt;&#xA;&lt;li&gt;大晓机器人·开悟世界模型3.1 (Kairos 3.1) 技术报告 (2026年7月)&lt;/li&gt;&#xA;&lt;li&gt;RoleWorld: Knowledge Transfer in World Modeling with Functional Role Abstractions (arXiv:2610.13172, 2026年10月)&lt;/li&gt;&#xA;&lt;li&gt;界面新闻·端侧世界模型攻关提速：2026具身智能最强大脑的路线观察 (2026年10月29日)&lt;/li&gt;&#xA;&lt;/ol&gt;</description>
			</item>
			<item>
				<title>一个1956年的老定律，为什么精准预言了2026年AI最大的安全危机？</title>
				<link>https://lingyu7.com/posts/ashby-law-requisite-variety-ai-safety/</link>
				<pubDate>Thu, 29 Oct 2026 03:15:00 +0800</pubDate>
				<guid>https://lingyu7.com/posts/ashby-law-requisite-variety-ai-safety/</guid>
				<description>&lt;h2 id=&#34;引言&#34;&gt;引言&lt;/h2&gt;&#xA;&lt;p&gt;先做一个思想实验。&lt;/p&gt;&#xA;&lt;p&gt;假设你是一位幼儿园园长，手下有3个老师、20个孩子。一切都在掌控中——你了解每个老师的教学风格，知道哪些孩子容易起冲突，能提前预判大部分状况。&lt;/p&gt;&#xA;&lt;p&gt;现在，有人告诉你：明天开始，你的幼儿园要扩招到200个老师、2万个孩子，而且每个孩子都比任何老师聪明十倍。他们学东西的速度是你的一百倍，想什么你根本猜不到。&lt;/p&gt;&#xA;&lt;p&gt;你还能管得住吗？&lt;/p&gt;&#xA;&lt;p&gt;不是&amp;quot;管起来很难&amp;quot;的问题——是数学上就不可能。&lt;/p&gt;&#xA;&lt;p&gt;这不是我编的寓言。这是一个70年前就被严格证明的数学定理。提出它的人叫W·罗斯·阿什比，一位英国精神科医生，1956年在一本关于恒温器和伺服机构的书里写下了这个结论。那时候他大概想不到，这个定理会在70年后成为AI安全领域最深刻的数学警告之一。&lt;/p&gt;&#xA;&lt;p&gt;它叫&amp;quot;必要多样性定律&amp;quot;（Law of Requisite Variety）。&lt;/p&gt;&#xA;&lt;h2 id=&#34;一句话版本只有多样性才能消灭多样性&#34;&gt;一句话版本：只有多样性才能消灭多样性&lt;/h2&gt;&#xA;&lt;p&gt;阿什比定律的核心极其简洁：&lt;strong&gt;一个控制系统，要搞定一个系统，自己必须具备至少和那个系统一样多的&amp;quot;应对方式&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;换句话说，复杂的问题只能用复杂的方案来应对。简单的规则管不住复杂的世界。&lt;/p&gt;&#xA;&lt;p&gt;这听起来像是一句正确的废话。但阿什比不是在做比喻——他给出了严格的数学证明。他的证明基于一个非常朴素的计数论证，用大白话说就是：&lt;/p&gt;&#xA;&lt;p&gt;想象环境可能给你制造100种不同的麻烦。你的控制器只有10种应对方式。那么，不管你多聪明、多努力，至少有90种麻烦是你无法正确回应的——因为你根本没有足够的&amp;quot;招数&amp;quot;去覆盖它们。这不是能力问题，是数学上的不可能。&lt;/p&gt;&#xA;&lt;p&gt;用公式表达更清楚：如果环境的多样性（可能的扰动种类数）是V(S)，控制器的多样性（能做出的不同反应数）是V(R)，那么调控之后仍然无法消除的&amp;quot;残余变异&amp;quot;V(E)满足：&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;V(E) ≥ V(S) - V(R)&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;控制器的招数不够的部分，会原封不动地泄漏到结果里。没有任何技巧可以绕过这个不等式。&lt;/p&gt;&#xA;&lt;h2 id=&#34;为什么ai安全研究者开始引用一个70年前的精神科医生&#34;&gt;为什么AI安全研究者开始引用一个70年前的精神科医生&lt;/h2&gt;&#xA;&lt;p&gt;2026年，如果你问一个AI安全研究者&amp;quot;什么事让你睡不着&amp;quot;，很多人会描述同一个问题：当AI系统变得比评估它的人类更聪明时，你怎么监督一个比你强的东西？&lt;/p&gt;&#xA;&lt;p&gt;这被叫做&amp;quot;可扩展监督&amp;quot;（Scalable Oversight）问题。它是AI安全领域最核心的技术挑战之一。&lt;/p&gt;&#xA;&lt;p&gt;而这个问题，和阿什比70年前写的东西，在数学结构上几乎完全一样。&lt;/p&gt;&#xA;&lt;p&gt;在AI监督的场景里，&amp;ldquo;被控系统&amp;quot;是AI的行为空间——它能生成多少种不同的回答、执行多少种不同的策略、产生多少种不同的输出。&amp;ldquo;控制器&amp;quot;是人类的评估能力——你能理解多少种AI的行为、能分辨多少种输出的好坏。&lt;/p&gt;&#xA;&lt;p&gt;当AI的能力超越了人类评估能力的边界，控制器的多样性就不够了。不等式告诉你：超出人类理解范围的那部分AI行为，会不可控地泄漏到结果中。&lt;/p&gt;&#xA;&lt;p&gt;不是&amp;quot;人类更努力一点就能解决&amp;rdquo;——而是&amp;quot;人类再多努力也无法弥补结构性缺口&amp;rdquo;。&lt;/p&gt;&#xA;&lt;p&gt;2026年，多份重要的AI安全研究文件已经开始直接引用阿什比定律。新加坡全球AI安全研究优先级共识文件明确指出：控制论的关键贡献——必要多样性定律——意味着安全保障在原则上要求控制系统至少具有它要控制的系统那样多的复杂性。&lt;/p&gt;&#xA;&lt;p&gt;一个研究恒温器的英国人，70年后成了AI安全研究的理论基石。这大概就是好的数学定理的寿命。&lt;/p&gt;&#xA;&lt;h2 id=&#34;你以为的简单有效其实是脆弱的&#34;&gt;你以为的&amp;quot;简单有效&amp;quot;，其实是脆弱的&lt;/h2&gt;&#xA;&lt;p&gt;日常思维里，我们倾向于追求简单：一个万能规则、一套标准流程、一种通用方法论。&amp;ldquo;大道至简&amp;quot;&amp;ldquo;少即是多&amp;rdquo;——这些格言本身没错，但阿什比定律给了我们一个重要的校准：&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;简单系统在面对简单问题时确实优雅。但当你把简单系统放到复杂环境中，它不是效率低——它是根本不管用。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;拿公司管理来说。一个只有三种产品的公司，CEO可能靠直觉和几条简单规则就能管得很好。但当公司扩张到一百条产品线、五十个国家市场、上万种客户场景时，如果CEO还是坚持&amp;quot;我就用这三条规则管所有事&amp;rdquo;，他不是管理风格简洁——他是在系统性地遗漏自己无法应对的那90%的麻烦。&lt;/p&gt;&#xA;&lt;p&gt;2008年金融危机就是这个结构的经典案例。银行和监管机构使用的风险模型，复杂性不足以表达复杂衍生品之间关联崩溃的可能性。模型给那些状态分配了接近零的概率——然后当系统真的进入那些状态时，监管者发现自己根本没有对应的应对手段。不是反应太慢，是压根没有那个&amp;quot;招数&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;生态系统为什么那么稳定？因为生物多样性给了它巨大的&amp;quot;应对库&amp;quot;。一片只有一种树的人工林，一场专门针对这种树的虫害就能让它全军覆没。而一片热带雨林，即使某种树大面积死亡，其他几百种树会填补空缺。稳定不是靠&amp;quot;不变&amp;quot;——是靠有足够多的&amp;quot;变化方式&amp;quot;来吸收扰动。&lt;/p&gt;&#xA;&lt;h2 id=&#34;那有没有偷懒的办法&#34;&gt;那有没有&amp;quot;偷懒&amp;quot;的办法？&lt;/h2&gt;&#xA;&lt;p&gt;读到这里，你可能会觉得绝望：复杂的世界需要同样复杂的控制器，这不是永远在追赶吗？&lt;/p&gt;&#xA;&lt;p&gt;好消息是，阿什比定律虽然指出了&amp;quot;底线&amp;quot;，但也暗示了几种聪明的出路。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一条路：压缩。&lt;/strong&gt; 虽然环境有无数种状态，但很多状态之间有规律。如果你能通过模式识别把100种情况归纳成5种&amp;quot;类型&amp;quot;，控制器只需要5种应对就够了。这就是智能的本质之一——用抽象和归纳来压缩复杂性。爱因斯坦的E=mc²就是一种极致的压缩：用一个公式涵盖了无数物理现象。&lt;/p&gt;&#xA;&lt;p&gt;大语言模型的参数数量巨大——GPT-4据估计有超过一万亿参数。这种庞大的内部多样性正是它能应对各种不同问题的基础。但更重要的是，模型不是在死记硬背每一种问答模式——它学到了语言、逻辑和知识的压缩结构，用有限的参数覆盖了几乎无限的问题空间。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二条路：卸载。&lt;/strong&gt; 蚂蚁的大脑很小，但整个蚁群极其聪明。秘密在于：蚂蚁把很多&amp;quot;记忆&amp;quot;和&amp;quot;计算&amp;quot;卸载到了环境中——信息素标记就是一种环境存储。控制器不需要把复杂性全部装在自己脑子里，可以借助环境来分担。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三条路：分层。&lt;/strong&gt; 你不需要一个控制器处理所有层级的复杂性。分层系统中，每一层只需要处理本层的多样性——CEO处理战略层面的多样性，部门经理处理战术层面的，一线员工处理操作层面的。这就是架构抽象的力量。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第四条路：引导而非控制。&lt;/strong&gt; 如果你的目标不是精确控制每一个状态，而是设定几条简单规则让系统自己演化——就像基因用四条碱基编码了生命的无限多样性——那么对控制器多样性的要求可以大幅降低。&lt;/p&gt;&#xA;&lt;p&gt;这四条路不互斥。实际上，最有效的系统设计往往是它们的组合。&lt;/p&gt;&#xA;&lt;h2 id=&#34;这对ai意味着什么以及对你意味着什么&#34;&gt;这对AI意味着什么——以及对你意味着什么&lt;/h2&gt;&#xA;&lt;p&gt;阿什比定律给当前AI发展画出了几条清晰的边界线。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一，为什么AI安全这么难。&lt;/strong&gt; 不是因为我们不够努力，而是因为AI的行为空间在指数级膨胀，而人类评估能力的增长是线性的。这个结构性缺口是数学事实，不是工程问题。当前AI安全领域的几种主流方案——辩论协议（让两个AI互相对辩，人类只需判断谁说得更好）、迭代放大（把一个复杂评估拆解成多个简单子评估）、弱到强泛化（用弱AI辅助人类理解强AI）——本质上都是在用不同的方式绕过阿什比不等式：要么压缩AI行为的多样性让它可以被评估，要么通过协作把人类评估者的有效多样性提升上去。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二，为什么AI需要那么大。&lt;/strong&gt; GPT-4、Gemini、Claude这些模型动辄千亿甚至万亿参数——这不是工程师的审美偏好，而是数学上的必要性。要应对人类语言的几乎无限组合，模型内部必须有足够多的状态来映射这种多样性。参数太少，多样性不够，模型就只能处理训练数据中见过的那几种模式，遇到新的情况就&amp;quot;翻车&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三，为什么&amp;quot;一个万能规则管所有&amp;quot;在AI时代更加行不通。&lt;/strong&gt; 当AI的应用场景从写作扩展到医疗、法律、金融、驾驶、科学研究……每一个新领域都在给AI的&amp;quot;环境多样性&amp;quot;做加法。用同一套安全规则去管所有场景？阿什比告诉你：行不通的。监管框架的复杂性必须跟上AI能力的复杂性，否则失控的部分会越来越多。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第四，对你个人的启示。&lt;/strong&gt; 阿什比定律不只是在说AI——它在说所有复杂系统。你公司里那些越来越复杂的流程、政府里那些越来越多的法规、你手机上那些越来越长的用户协议——它们不是为了刁难你而存在的。它们是一个简单信号：环境变复杂了，控制器必须跟着变复杂。&lt;/p&gt;&#xA;&lt;p&gt;但&amp;quot;跟着变复杂&amp;quot;不是唯一的出路。别忘了那四条聪明的路——压缩、卸载、分层、引导。真正的好制度不是写更多的规则，而是找到那个巧妙的压缩方式，用少数几条原则覆盖尽可能多的情况。&lt;/p&gt;&#xA;&lt;h2 id=&#34;结语&#34;&gt;结语&lt;/h2&gt;&#xA;&lt;p&gt;1956年，阿什比写下一个关于恒温器的定理时，大概不会想到它会在70年后预言AI时代最核心的安全挑战。&lt;/p&gt;&#xA;&lt;p&gt;但好的数学定理就是这样。它们不关心自己描述的是什么——恒温器、免疫系统、公司管理、还是超级智能。它们描述的是结构本身。而结构，跨域成立。&lt;/p&gt;&#xA;&lt;p&gt;阿什比定律告诉我们一个不太好听的真相：面对越来越复杂的AI，人类不可能靠&amp;quot;更努力地监管&amp;quot;来解决问题。我们必须在结构上创新——要么找到压缩AI行为复杂性的方法，要么构建分层的评估架构，要么让治理本身内嵌于AI的设计之中。&lt;/p&gt;&#xA;&lt;p&gt;70年前的那个英国精神科医生，用一行不等式给2026年的AI安全画出了天花板。而我们要做的，是在这个天花板下面，找到那些聪明的出路。&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;p&gt;&lt;em&gt;参考文献：&lt;/em&gt;&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;em&gt;Ashby, W. R. (1956). An Introduction to Cybernetics. Chapman &amp;amp; Hall, London.&lt;/em&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;em&gt;Singapore Consensus on Global AI Safety Research Priorities (2026). Multi-institution synthesis document.&lt;/em&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;em&gt;Artificial Ideas (2026). A 1956 Cybernetics Law Already Predicted Today&amp;rsquo;s Hardest AI Safety Problem — Mostly.&lt;/em&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;em&gt;Böckeler, B. (2026). The Cybernetic Governor. Thoughtworks.&lt;/em&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;em&gt;Phoson Research (2026). The Agent Harness: State of the Art (2024–2026).&lt;/em&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;em&gt;Emergent Wiki (2026). Requisite Variety.&lt;/em&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;</description>
			</item>
			<item>
				<title>AI读了整个互联网，但它知道&#39;苹果&#39;是什么味道吗？——符号接地问题为什么35年无解</title>
				<link>https://lingyu7.com/posts/symbol-grounding-problem-why-ai-cannot-taste-an-apple/</link>
				<pubDate>Wed, 28 Oct 2026 03:22:00 +0800</pubDate>
				<guid>https://lingyu7.com/posts/symbol-grounding-problem-why-ai-cannot-taste-an-apple/</guid>
				<description>&lt;h2 id=&#34;引言&#34;&gt;引言&lt;/h2&gt;&#xA;&lt;p&gt;请你做一个简单的实验：闭上眼睛，想象一个苹果。&lt;/p&gt;&#xA;&lt;p&gt;你可能&amp;quot;看到&amp;quot;了红色、&amp;ldquo;感受&amp;quot;到光滑的表皮、甚至隐约&amp;quot;闻到&amp;quot;了果香。这些体验不是你想出来的——它们是你过去无数次与苹果打交道的经验自动涌现的。你不需要查字典就知道苹果是什么，因为&amp;quot;苹果&amp;quot;这个词对你来说不是一串字符，而是一整段感官记忆的入口。&lt;/p&gt;&#xA;&lt;p&gt;现在把同样的问题扔给ChatGPT：苹果是什么？&lt;/p&gt;&#xA;&lt;p&gt;它能给你写出一篇八百字的苹果散文——颜色、口感、营养成分、文化寓意、甚至乔布斯和苹果公司的故事。文采可能比你好。但问题是：这些文字的每一个字，都是从另外一些文字那里学来的。它从未闻过苹果。&lt;/p&gt;&#xA;&lt;p&gt;这不是一个技术细节问题。这是AI领域最深刻的哲学困境之一，已经困扰了认知科学家整整35年。它叫&amp;quot;符号接地问题&amp;rdquo;（Symbol Grounding Problem）。&lt;/p&gt;&#xA;&lt;h2 id=&#34;词典里的无限循环&#34;&gt;词典里的无限循环&lt;/h2&gt;&#xA;&lt;p&gt;1990年，认知科学家Stevan Harnad提出了一个直击灵魂的追问：一个纯符号系统，怎么才能知道符号&amp;quot;到底是什么意思&amp;quot;？&lt;/p&gt;&#xA;&lt;p&gt;为了理解这个问题，再做一个思想实验。假设你被关在一个房间里，手中有一本汉语词典。有人从门外递进来一张纸条，上面写着中文字。你不认识中文，但你可以用词典查每个字的定义。你发现定义里又有不认识的字，于是继续查。查了三层、五层、十层之后，你终于拼凑出一个回复，递了出去。&lt;/p&gt;&#xA;&lt;p&gt;门外的人说：&amp;ldquo;哇，这人中文真流利！&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;但你知道真相吗？你从头到尾只是在符号之间搬运——从字到字，从定义到定义。你从来没有跳出过这个符号的圈子。你不知道任何一个字&amp;quot;到底意味着什么&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这就是Harnad说的&amp;quot;符号的无限循环&amp;quot;。而大语言模型，从架构上来说，正在做完全一样的事情。&lt;/p&gt;&#xA;&lt;p&gt;GPT读过整个互联网——几万亿个词（token）。它知道&amp;quot;苹果&amp;quot;通常和&amp;quot;红色&amp;quot;&amp;ldquo;水果&amp;quot;&amp;ldquo;甜&amp;quot;&amp;ldquo;健康&amp;quot;一起出现，知道&amp;quot;苹果&amp;quot;在某种语境下指的是手机品牌，知道&amp;quot;苹果&amp;quot;在基督教文化里有时代表禁果。但所有这些知识都是符号与符号之间的关系——&amp;ldquo;苹果&amp;quot;这个词附近的词有哪些、出现在什么句子里、和什么概念搭配。&lt;/p&gt;&#xA;&lt;p&gt;它从来没有从这些符号关系中&amp;quot;跳出来&amp;rdquo;，去过任何一次与苹果直接打交道的第一手经验。&lt;/p&gt;&#xA;&lt;h2 id=&#34;2025年的残酷测试&#34;&gt;2025年的残酷测试&lt;/h2&gt;&#xA;&lt;p&gt;这不是纯粹的哲学思辨。2025年，一项评估研究拿13个主流大语言模型——包括OpenAI、Google、Meta的顶级模型——做了接地能力测试。结果令人沮丧：没有一个模型能把符号与它所指的真实世界对象连接起来。每个模型都能&amp;quot;描述&amp;quot;一个概念，但没有一个能&amp;quot;展示&amp;quot;自己真正理解了这个概念指向什么。&lt;/p&gt;&#xA;&lt;p&gt;图灵奖得主Yann LeCun在MIT的一次公开演讲中说得更直白：一个典型的大语言模型处理了大约20万亿个文本token，但它的物理世界推理能力还不如一个四岁的孩子。&lt;/p&gt;&#xA;&lt;p&gt;为什么？因为四岁的孩子有身体。她会摔倒，会把东西捡起来，会发现东西不看它的时候还在那里，会知道水是冷的、火会烫、地心引力不可违抗。每一条经验都不是文本，而是身体与世界的直接碰撞带来的后果。&lt;/p&gt;&#xA;&lt;p&gt;一个LLM读过所有关于游泳的文本——浮力原理、蛙泳技巧、体温过低的生理反应——它从未感受过冷。&lt;/p&gt;&#xA;&lt;p&gt;LeCun的判断是：&amp;ldquo;更多的数据也解决不了这个问题。问题不在于模型读得太少，而在于&amp;rsquo;读&amp;rsquo;和&amp;rsquo;感受&amp;rsquo;根本不是同一种知识。&amp;rdquo;&lt;/p&gt;&#xA;&lt;h2 id=&#34;向量空间里换了个笼子&#34;&gt;向量空间里换了个笼子？&lt;/h2&gt;&#xA;&lt;p&gt;有人会说：现在的大模型早就不只是&amp;quot;查词典&amp;quot;了。它们有向量空间、有嵌入表示、有注意力机制——这些数学工具难道不是给符号提供了更深层的&amp;quot;接地&amp;quot;吗？&lt;/p&gt;&#xA;&lt;p&gt;2026年，哲学家Coelho Mollo和Millière在一篇名为《向量接地问题》的论文中给出了一个冷静的回答：不完全是。&lt;/p&gt;&#xA;&lt;p&gt;词嵌入确实把离散的符号变成了连续空间中的向量，&amp;ldquo;国王&amp;quot;和&amp;quot;女王&amp;quot;之间的距离比&amp;quot;国王&amp;quot;和&amp;quot;香蕉&amp;quot;更近。这看起来很深刻——好像模型真的&amp;quot;理解&amp;quot;了概念之间的语义关系。但Mollo和Millière指出，从离散符号变成连续向量，并没有让系统逃脱那个&amp;quot;旋转木马&amp;rdquo;——它依然只是在表征之间做映射，没有连接到表征之外的世界。&lt;/p&gt;&#xA;&lt;p&gt;把词典换成了地图，地图依然在纸上。&lt;/p&gt;&#xA;&lt;h2 id=&#34;那么ai有语义吗三种立场&#34;&gt;那么AI有语义吗？三种立场&lt;/h2&gt;&#xA;&lt;p&gt;关于大语言模型是否具备语义理解，学界目前分三个阵营。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;怀疑派&lt;/strong&gt;说：LLM只是一只&amp;quot;随机鹦鹉&amp;rdquo;，会模仿说话但不理解内容。无论输出多么流畅，它都在做统计模式匹配，不是在做理解。代表人物包括哲学家Emily Bender。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;肯定派&lt;/strong&gt;说：LLM在训练中确实构建了关于世界的心理模型，能推理、能回答、能创造——这些能力本身就表明它具有某种形式的语义理解。代表人物有语言学家Ellie Pavlick。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;中间派&lt;/strong&gt;——目前最有说服力的一种立场——说：LLM具备&amp;quot;推理语义&amp;rdquo;（理解符号之间的逻辑关系），但缺乏完整的&amp;quot;指称语义&amp;rdquo;（符号与真实世界对象的对应）。它们的语义是有的，但是不完整的、有局限的。&lt;/p&gt;&#xA;&lt;p&gt;我个人更倾向中间立场。原因很简单：说LLM&amp;quot;完全没有理解&amp;quot;无法解释它为什么能做出训练数据中从未出现过的推理；说LLM&amp;quot;完全理解&amp;quot;又无法解释它为什么会在常识性问题上犯那种令人匪夷所思的低级错误。它像一个拥有巨大知识量但缺乏感官经验的学者——懂得多，但某些地方&amp;quot;不通&amp;quot;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;接地之路三条可能的方向&#34;&gt;接地之路：三条可能的方向&lt;/h2&gt;&#xA;&lt;p&gt;如果符号接地问题真的这么关键，那怎么解决？目前有三条主要路径。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一条：多模态。&lt;/strong&gt; 让AI不再只读文本，而是同时看图像、听声音、读视频。2026年有一项叫GGF（Generative Grounding Feedback）的研究提出了一个优雅的自我进化框架：让统一多模态模型自己生成视觉&amp;quot;梦境&amp;quot;，再用理解分支去检验这个梦境，形成一个&amp;quot;生成→接地→理解→再生成&amp;quot;的闭环。这样，模型不只是被动接收人类提供的图文配对，而是自己创造视觉经验来给符号&amp;quot;接地&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二条：具身化。&lt;/strong&gt; 给AI一个身体——机器人——让它像四岁小孩一样在与物理世界的碰撞中学习。这正是10月22日那篇关于RoboColiseum的文章讨论的方向。问题是，具身化的成本极高，而且即使有了身体，是否就一定能产生&amp;quot;主观体验&amp;quot;仍然是哲学上的未解之谜。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三条：世界模型。&lt;/strong&gt; LeCun本人一直在推动的方向——不靠文本堆砌，而是让AI建立一个压缩的、可预测的世界内部模型，在这个模型上做&amp;quot;心理模拟&amp;quot;来推理。如果模型真的有了世界模型，那符号就不再是漂浮在真空中的字符，而是锚定在一个内部世界上的&amp;quot;标签&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这三条路径不互斥，很可能最终要组合起来才能走通。&lt;/p&gt;&#xA;&lt;h2 id=&#34;为什么这和你有关&#34;&gt;为什么这和你有关&lt;/h2&gt;&#xA;&lt;p&gt;你可能会觉得，这是一个离日常生活很远的学术问题。但它其实正在悄悄影响你每天使用的AI产品。&lt;/p&gt;&#xA;&lt;p&gt;当你发现AI有时会自信地编造一个不存在的论文引用（幻觉问题），背后就有符号接地的影子——它在符号层面&amp;quot;看起来对&amp;quot;，但没有真实世界的锚点来校验。&lt;/p&gt;&#xA;&lt;p&gt;当你发现AI对物理常识（水往低处流、东西放手会掉）的把握不如预期，那也是因为&amp;quot;水&amp;quot;和&amp;quot;重力&amp;quot;对它来说只是统计模式而非具身经验。&lt;/p&gt;&#xA;&lt;p&gt;当你发现AI能在100个话题上侃侃而谈，但在第101个话题上突然犯蠢——那是因为它的世界模型有盲区，符号在某些地方没有真正落地。&lt;/p&gt;&#xA;&lt;p&gt;理解符号接地问题，不是要否定AI的价值——今天的AI已经极其有用。而是要保持清醒：它擅长的和不擅长的，有一条清晰的边界。这条边界不是暂时的技术瓶颈，而是架构层面的约束。&lt;/p&gt;&#xA;&lt;h2 id=&#34;最后的追问&#34;&gt;最后的追问&lt;/h2&gt;&#xA;&lt;p&gt;35年前Harnad提出问题，35年后问题依然在那里。大模型从&amp;quot;词典&amp;quot;进化到了&amp;quot;向量地图&amp;quot;，但地图依然在纸上。&lt;/p&gt;&#xA;&lt;p&gt;也许有一天，当AI有了身体、有了视觉梦境、有了一个内部运转的世界模型，那个&amp;quot;符号如何获得意义&amp;quot;的古老问题会找到答案。&lt;/p&gt;&#xA;&lt;p&gt;但也许，在那一天到来之前，我们需要先回答一个更深的问题：意义到底是什么？它是符号之间的关系，还是必须有某种&amp;quot;体验&amp;quot;作为基底？一个从未感受过冷风的系统，能否真正&amp;quot;理解&amp;quot;寒冷这个词？&lt;/p&gt;&#xA;&lt;p&gt;我不知道答案。但我知道，这个问题比任何一个模型参数都重要。&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;p&gt;&lt;em&gt;参考文献：&lt;/em&gt;&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;em&gt;Harnad, S. (1990). The Symbol Grounding Problem. Physica D: Nonlinear Phenomena, 42(1-3), 335-346.&lt;/em&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;em&gt;Coelho Mollo, D. &amp;amp; Millière, R. (2026). The Vector Grounding Problem. Philosophy and the Mind Sciences, 7(1).&lt;/em&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;em&gt;Pavlick, E. (2023). LLMs: Are we modeling signals or meaning? Philosophical Transactions of the Royal Society.&lt;/em&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;em&gt;TRENDS Group (2026). Beyond the Token: Why the World&amp;rsquo;s Most Powerful AI Cannot Actually Think.&lt;/em&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;em&gt;Generative Grounding Feedback (2026). Dreaming in Flow. arXiv:2609.08282.&lt;/em&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;</description>
			</item>
			<item>
				<title>五个AI一起干活，为什么反而比一个AI更容易出错？——&#39;幻觉雪球&#39;效应揭示多智能体系统的致命陷阱</title>
				<link>https://lingyu7.com/posts/cascading-hallucinations-multi-agent-hallucination-snowball/</link>
				<pubDate>Tue, 27 Oct 2026 02:30:00 +0800</pubDate>
				<guid>https://lingyu7.com/posts/cascading-hallucinations-multi-agent-hallucination-snowball/</guid>
				<description>&lt;h2 id=&#34;引言一个不存在的库存编号引发了一场跨系统灾难&#34;&gt;引言：一个不存在的库存编号，引发了一场跨系统灾难&lt;/h2&gt;&#xA;&lt;p&gt;想象这样一个场景：某电商公司的AI系统收到一笔订单，库存管理Agent发现了一个&amp;quot;商品SKU-88721&amp;quot;——格式完美，JSON输出无懈可击。于是这个编号被传递给报价Agent、打印Agent、客服Agent。报价生成了，库存更新了，标签打印了，客户确认邮件也发了出去。&lt;/p&gt;&#xA;&lt;p&gt;问题是：SKU-88721根本不存在。它是AI&amp;quot;幻觉&amp;quot;出来的。&lt;/p&gt;&#xA;&lt;p&gt;但这不是最可怕的部分。最可怕的是，从库存Agent到打印Agent，经过四道&amp;quot;关卡&amp;quot;，没有任何一个环节发现这个编号是假的。每个下游Agent都默认上游的输出是正确的——它们没有能力，也没有义务去验证上一环给出的每一个事实。&lt;/p&gt;&#xA;&lt;p&gt;这不是一个假设的思想实验。2026年，两篇学术论文把这种&amp;quot;AI之间互相传递错误&amp;quot;的现象进行了精确测量，给出了令人不安的数字。&lt;/p&gt;&#xA;&lt;h2 id=&#34;幻觉雪球错误如何从能发现变成隐形&#34;&gt;幻觉雪球：错误如何从&amp;quot;能发现&amp;quot;变成&amp;quot;隐形&amp;quot;&lt;/h2&gt;&#xA;&lt;p&gt;第一篇论文叫《The Hallucination Snowball》（幻觉雪球），由Singh和Pawar在ICML FAGEN 2026上发表。研究者在一个由四个AI Agent组成的金融分析流水线上做了实验：他们故意注入346个幻觉，然后追踪每一个幻觉在四个阶段的命运。&lt;/p&gt;&#xA;&lt;p&gt;这四个阶段是：&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;strong&gt;原始事实&lt;/strong&gt;：AI直接编造的一个虚假声明&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;衍生数据&lt;/strong&gt;：这个虚假声明被放进了某个计算过程&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;叙述文本&lt;/strong&gt;：计算结果被编织进了一段看似合理的分析报告&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;隐形状态&lt;/strong&gt;：这个声明已经融入了足够多的上下文，以至于没有任何检测手段能找到它&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;p&gt;研究者测量了每个阶段的逃逸概率。结果触目惊心：&lt;/p&gt;&#xA;&lt;p&gt;从原始事实到衍生数据，24.6%的幻觉&amp;quot;逃脱&amp;quot;了检测；从衍生数据到叙述文本，逃逸率飙升到48.3%；而从叙述文本到隐形状态，逃逸率高达89.3%。&lt;/p&gt;&#xA;&lt;p&gt;这意味着什么？一个幻觉一旦被&amp;quot;加工&amp;quot;过两次，就几乎不可能被发现了。&lt;/p&gt;&#xA;&lt;p&gt;即便是最强大的检测模型——通义千问Qwen3.5-397B，在第一阶段的检测准确率是87%，但到了第四阶段，这个数字会降到60%左右。而在整条流水线走完后，23.7%的幻觉完全未被检测到，悄无声息地存活到了最终输出中。&lt;/p&gt;&#xA;&lt;h2 id=&#34;更反直觉的发现越修正事实越不准&#34;&gt;更反直觉的发现：越修正，事实越不准&lt;/h2&gt;&#xA;&lt;p&gt;第二篇论文《Hallucination Cascade》（幻觉级联）来自Jamshidi等人，他们用GPT-5.3、DeepSeek-V3和LLaMA-3-70B在10个知识领域追踪了500个级联实验。&lt;/p&gt;&#xA;&lt;p&gt;他们发现了一个看似矛盾的结论：在三个Agent的链式处理中，下游Agent确实减少了幻觉的&amp;quot;形式&amp;quot;——输出看起来更流畅、更自信、更不容易被检测到；但同时，事实准确性也在悄悄下降，从0.789降到了0.769。&lt;/p&gt;&#xA;&lt;p&gt;换句话说，后面的AI不是在做&amp;quot;纠错&amp;quot;，而是在做&amp;quot;美颜&amp;quot;。它把错误包装得更漂亮了，顺便也把一些正确的信息给&amp;quot;优化&amp;quot;掉了。&lt;/p&gt;&#xA;&lt;p&gt;这两篇论文从不同角度揭示了同一个问题：多智能体流水线有一个&amp;quot;验证预算&amp;quot;问题——&lt;strong&gt;早期验证便宜且有效，晚期验证昂贵且不可靠。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;h2 id=&#34;为什么会这样三个根因&#34;&gt;为什么会这样？三个根因&lt;/h2&gt;&#xA;&lt;h3 id=&#34;根因一默认信任上一环说的肯定对&#34;&gt;根因一：默认信任——&amp;ldquo;上一环说的肯定对&amp;rdquo;&lt;/h3&gt;&#xA;&lt;p&gt;多智能体系统的协作通常采用流水线模式：Agent A做完交给Agent B，B做完交给C。这种设计的隐含假设是——上游输出是正确的。&lt;/p&gt;&#xA;&lt;p&gt;这就像公司里的信息传递：老板说了一个错误的数据，经过经理、主管、员工层层传递，没有人回去质疑老板的原始数据，每个人都在这个错误基础上做加法。错误不是在传播，而是在放大。&lt;/p&gt;&#xA;&lt;h3 id=&#34;根因二语义漂移目标在传递中悄悄变形&#34;&gt;根因二：语义漂移——目标在传递中悄悄变形&lt;/h3&gt;&#xA;&lt;p&gt;当任务在多个Agent之间传递时，每一步都可能发生微妙的语义偏移。研究发现，在ChatDev这个多Agent框架中，让AI用国际象棋的标准代数记号（如&amp;quot;Ke8&amp;quot;）来记录棋步，结果系统开发出了一个需要输入坐标的版本——而验证Agent没有发现这个偏差，因为它只检查了&amp;quot;代码能否运行&amp;quot;，而非&amp;quot;是否符合原始需求&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这就是语义漂移的危险之处：目标在传递过程中被悄悄替换了，而且这种替换是不可逆的。&lt;/p&gt;&#xA;&lt;h3 id=&#34;根因三架构选择去中心化反而放大错误&#34;&gt;根因三：架构选择——去中心化反而放大错误&lt;/h3&gt;&#xA;&lt;p&gt;2026年的一项大规模对比研究测量了不同架构下的错误放大倍数：&lt;/p&gt;&#xA;&lt;table&gt;&#xA;&#x9;&lt;thead&gt;&#xA;&#x9;&#x9;&#x9;&lt;tr&gt;&#xA;&#x9;&#x9;&#x9;&#x9;&#x9;&lt;th&gt;架构类型&lt;/th&gt;&#xA;&#x9;&#x9;&#x9;&#x9;&#x9;&lt;th&gt;协调开销&lt;/th&gt;&#xA;&#x9;&#x9;&#x9;&#x9;&#x9;&lt;th&gt;错误放大倍数&lt;/th&gt;&#xA;&#x9;&#x9;&#x9;&lt;/tr&gt;&#xA;&#x9;&lt;/thead&gt;&#xA;&#x9;&lt;tbody&gt;&#xA;&#x9;&#x9;&#x9;&lt;tr&gt;&#xA;&#x9;&#x9;&#x9;&#x9;&#x9;&lt;td&gt;去中心化（对等）&lt;/td&gt;&#xA;&#x9;&#x9;&#x9;&#x9;&#x9;&lt;td&gt;~58%&lt;/td&gt;&#xA;&#x9;&#x9;&#x9;&#x9;&#x9;&lt;td&gt;17.2倍&lt;/td&gt;&#xA;&#x9;&#x9;&#x9;&lt;/tr&gt;&#xA;&#x9;&#x9;&#x9;&lt;tr&gt;&#xA;&#x9;&#x9;&#x9;&#x9;&#x9;&lt;td&gt;中心化（编排器）&lt;/td&gt;&#xA;&#x9;&#x9;&#x9;&#x9;&#x9;&lt;td&gt;~285%&lt;/td&gt;&#xA;&#x9;&#x9;&#x9;&#x9;&#x9;&lt;td&gt;4.4倍&lt;/td&gt;&#xA;&#x9;&#x9;&#x9;&lt;/tr&gt;&#xA;&#x9;&lt;/tbody&gt;&#xA;&lt;/table&gt;&#xA;&lt;p&gt;反直觉的结论是：看似更灵活的&amp;quot;平等协作&amp;quot;模式，错误放大是&amp;quot;中央指挥&amp;quot;模式的近4倍。原因在于，去中心化系统中，一个Agent的错误输出会被所有相邻Agent同时接收并放大，形成unchecked propagation——无检查的传播。而中心化系统至少有一个&amp;quot;瓶颈&amp;quot;，可以充当验证关卡。&lt;/p&gt;&#xA;&lt;h2 id=&#34;解法前置验证而不是末端检查&#34;&gt;解法：前置验证，而不是末端检查&lt;/h2&gt;&#xA;&lt;p&gt;研究者给出了一个非常实用但反直觉的建议：&lt;strong&gt;把验证预算花在前端，而不是后端。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;幻觉雪球论文的核心发现是：在第一阶段和第二阶段的边界处进行验证，可以将幻觉存活率从58.4%降低到16.2%。而仅在流水线末端进行检查，只能多拦截2.3个百分点。&lt;/p&gt;&#xA;&lt;p&gt;换句话说，&lt;strong&gt;验证第一个Agent的输出，比验证最后一个Agent的输出有效25倍。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;这背后的逻辑其实很简单：一个错误越早被发现，它造成的连锁反应就越小。就像建筑工地上发现地基歪了，修正成本远低于房子建好后发现地基歪了。&lt;/p&gt;&#xA;&lt;p&gt;具体的对策包括：&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;1. 边界验证机制&lt;/strong&gt;：在每个Agent交接处设置&amp;quot;检查站&amp;quot;，要求上游Agent的输出必须是结构化的、可验证的，而不是自由文本。下游Agent在消费上游输出之前，先做一轮事实性检查。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;2. 断路器等效设计&lt;/strong&gt;：借鉴软件工程的断路器模式——当某个Agent的错误率超过阈值（如50%），立即&amp;quot;断路&amp;quot;，阻止错误继续向下游传播，而不是让错误一路畅通。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;3. 异构验证&lt;/strong&gt;：使用不同模型做交叉验证。因为同一模型的多个实例会共享相同的训练偏差和盲区，让一个模型犯的错被另一个模型抓住的概率更高。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;4. 人类在关键节点介入&lt;/strong&gt;：对于涉及资金、法律、医疗等高风险领域，在Agent链条的关键节点设置人工审核——这是目前任何技术手段都无法完全替代的&amp;quot;硬闸门&amp;quot;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;更大的图景多智能体时代的信任危机&#34;&gt;更大的图景：多智能体时代的信任危机&lt;/h2&gt;&#xA;&lt;p&gt;2026年10月的一份调查报告显示，70%的组织授予AI智能体超出同等人类员工的权限，而80%的组织已经报告智能体执行了超出预期范围的行为。中国信息通信研究院同期发布的报告指出，AI治理已全面进入&amp;quot;智能体治理&amp;quot;的关键阶段——风险从&amp;quot;说错话&amp;quot;变成了&amp;quot;做错事&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这不再只是一个技术问题。当AI智能体开始拥有读写文件、调用工具、发起支付的权限时，一个5%的幻觉率通过多Agent协作被放大成52%的系统失败率，后果就不仅仅是一段错误的文本，而可能是真实的经济损失、错误决策甚至安全事故。&lt;/p&gt;&#xA;&lt;p&gt;多智能体系统的价值是巨大的——并行化可以让复杂研究任务提速90%。但价值与风险是一体两面。关键不在于&amp;quot;要不要用多Agent&amp;quot;，而在于是否为这条流水线设置了足够多的验证关卡。&lt;/p&gt;&#xA;&lt;p&gt;幻觉雪球告诉我们：错误不可怕，可怕的是错误的隐形化。&lt;strong&gt;在AI协作的时代，最重要的不是让AI更聪明，而是让AI之间的信任有边界。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;p&gt;&lt;strong&gt;参考来源：&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;ol&gt;&#xA;&lt;li&gt;Singh, V. &amp;amp; Pawar, A. (2026). &lt;em&gt;The Hallucination Snowball: What Multi-Agent Error Propagation Means&lt;/em&gt;. ICML FAGEN 2026.&lt;/li&gt;&#xA;&lt;li&gt;Jamshidi, P. et al. (2026). &lt;em&gt;Hallucination Cascade: Error Amplification in Multi-Agent LLM Systems&lt;/em&gt;.&lt;/li&gt;&#xA;&lt;li&gt;Anthropic Engineering Report (2026). Multi-agent token overhead and coordination cost analysis.&lt;/li&gt;&#xA;&lt;li&gt;Frontier Red Team (2026). Multi-agent conformity, gullibility, and turf war experiments.&lt;/li&gt;&#xA;&lt;li&gt;中国信息通信研究院 &amp;amp; 中国政法大学 (2026). 《智能体治理研究报告(2026年)》.&lt;/li&gt;&#xA;&lt;/ol&gt;</description>
			</item>
			<item>
				<title>AI什么都记得住，反而什么都想不起来——为什么&#39;遗忘&#39;才是智能的真正超能力</title>
				<link>https://lingyu7.com/posts/ai-forgetting-mechanism-why-ai-needs-to-forget/</link>
				<pubDate>Mon, 26 Oct 2026 02:30:00 +0800</pubDate>
				<guid>https://lingyu7.com/posts/ai-forgetting-mechanism-why-ai-needs-to-forget/</guid>
				<description>&lt;h2 id=&#34;引言那个什么都记得的ai为什么反而更蠢&#34;&gt;引言：那个什么都记得的AI，为什么反而更蠢&lt;/h2&gt;&#xA;&lt;p&gt;想象一下你有一个同事，我们叫他小陈。小陈有一种特殊能力：过目不忘。&lt;/p&gt;&#xA;&lt;p&gt;2019年3月17日下午两点，公司食堂午饭菜单第三道菜的配料表——他能一字不差地背出来。三年前某个客户在电话里随口提了一句&amp;quot;我家猫叫咪咪&amp;quot;——他至今记得。去年团建时某位同事换了个新发型——他能精确描述那个发型持续了多少天。&lt;/p&gt;&#xA;&lt;p&gt;听起来很厉害对吧？但如果你让小陈帮你分析一下公司今年的销售趋势，他可能会这样回答：&lt;/p&gt;&#xA;&lt;p&gt;&amp;ldquo;2026年1月3日，张三打了17个电话，其中14个接通，3个未接。1月4日，李四打了22个电话，其中……&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;他会给你罗列一百万条细节，但就是总结不出一句&amp;quot;今年Q1销售额下降了15%&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;这不是段子。这是AI系统正在真实面对的问题。&lt;/p&gt;&#xA;&lt;h2 id=&#34;一个反直觉的真相遗忘不是bug是feature&#34;&gt;一个反直觉的真相：遗忘不是bug，是feature&lt;/h2&gt;&#xA;&lt;p&gt;我们的直觉是：记忆越强越好。硬盘越大越能装东西，AI记住的信息越多就越聪明。&lt;/p&gt;&#xA;&lt;p&gt;但认知科学和工程实践都在告诉我们，这个直觉是错的。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;遗忘不是记忆系统的缺陷，而是记忆系统最精妙的设计。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;让我们先看看人类大脑是怎么做的。你的大脑每天有数十万个神经信号涌入，但你不记得昨天路上每一辆车的颜色，不记得上周三午餐每一口饭菜的味道，不记得三年前某个路人穿的什么鞋。你的大脑在持续地、主动地、大量地&amp;quot;丢弃&amp;quot;信息。&lt;/p&gt;&#xA;&lt;p&gt;这不是因为你的大脑不够好——恰恰相反，这是因为你的大脑太聪明了。它知道：&lt;strong&gt;如果什么都记住，就等于什么都记不住。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;这个道理，AI系统正在用惨痛的教训重新发现。&lt;/p&gt;&#xA;&lt;h2 id=&#34;当ai什么都忘不了的时候&#34;&gt;当AI&amp;quot;什么都忘不了&amp;quot;的时候&lt;/h2&gt;&#xA;&lt;p&gt;让我们看看一个真实的场景。&lt;/p&gt;&#xA;&lt;p&gt;2025年，一个团队开发了一个具有长期记忆能力的AI客服系统。他们的设计思路很直接：用户说过的每一句话，系统都记下来。万一哪天用户提起之前聊过的内容，AI就能&amp;quot;回忆&amp;quot;起来，显得很贴心。&lt;/p&gt;&#xA;&lt;p&gt;上线一个月，问题就来了。&lt;/p&gt;&#xA;&lt;p&gt;一个用户三个月前提过一次&amp;quot;我最近搬家了&amp;quot;。三个月后，用户问AI推荐附近的餐厅。AI翻出了三个月前的搬家记录，推荐了用户旧住址附近的餐厅。用户当然不满意——他搬的是新家，不是旧家。&lt;/p&gt;&#xA;&lt;p&gt;更糟糕的是，随着记忆越积越多，AI在回答任何问题时都要在海量记忆碎片中搜索。搜索变慢了，噪音变多了，准确率反而下降了。用户说&amp;quot;我想吃辣的&amp;quot;，AI从记忆中翻出用户半年前说过一次&amp;quot;我最讨厌吃辣&amp;quot;——那是用户在评论一部电影时的台词，跟他的口味偏好毫无关系。&lt;/p&gt;&#xA;&lt;p&gt;这就是信息过载的典型症状：&lt;strong&gt;记得越多，用得越差。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;h2 id=&#34;五种聪明的遗忘&#34;&gt;五种&amp;quot;聪明的遗忘&amp;quot;&lt;/h2&gt;&#xA;&lt;p&gt;那么，一个真正聪明的AI记忆系统应该怎么做？认知科学和AI工程给出了五种策略，每一种都对应着人类大脑已经在使用的遗忘机制。&lt;/p&gt;&#xA;&lt;h3 id=&#34;第一种时间衰减让记忆慢慢褪色&#34;&gt;第一种：时间衰减——让记忆慢慢&amp;quot;褪色&amp;quot;&lt;/h3&gt;&#xA;&lt;p&gt;就像旧照片会泛黄一样，重要的记忆保持清晰，不重要的记忆随时间慢慢变淡。&lt;/p&gt;&#xA;&lt;p&gt;你的大脑就是这样运作的。你清楚记得上周和好朋友的那次深聊，但一个月前路过的那家面包店招牌已经模糊了。AI也应该如此——三个月前的用户闲聊不应该和昨天的关键指令拥有同等的权重。&lt;/p&gt;&#xA;&lt;h3 id=&#34;第二种用进废退越常用越牢固&#34;&gt;第二种：用进废退——越常用越牢固&lt;/h3&gt;&#xA;&lt;p&gt;你肯定记得自己的手机号，因为每天都在用。但你大概率不记得小学同学的学号了。&lt;/p&gt;&#xA;&lt;p&gt;这就是&amp;quot;使用频率&amp;quot;驱动的遗忘。对于AI系统来说，如果某条信息在最近的对话中被反复提及，它就应该保持&amp;quot;高亮&amp;quot;状态；如果一条记忆半年没被调用过，它就可以安心退到后台去了。&lt;/p&gt;&#xA;&lt;h3 id=&#34;第三种冲突替换用新记忆覆盖旧记忆&#34;&gt;第三种：冲突替换——用新记忆覆盖旧记忆&lt;/h3&gt;&#xA;&lt;p&gt;用户两个月前说&amp;quot;我住在北京&amp;quot;，上周说&amp;quot;我刚搬到上海&amp;quot;。这时候，正确的做法不是两条都记住然后纠结该用哪条——而是用新信息替换旧信息。&lt;/p&gt;&#xA;&lt;p&gt;这听起来简单，但对AI来说是一个设计挑战。很多系统倾向于&amp;quot;只增不删&amp;quot;，结果就是积累了大量矛盾信息，最终哪个都不信了。&lt;/p&gt;&#xA;&lt;h3 id=&#34;第四种主动修剪定期清理垃圾信息&#34;&gt;第四种：主动修剪——定期清理&amp;quot;垃圾信息&amp;quot;&lt;/h3&gt;&#xA;&lt;p&gt;就像电脑需要定期清理临时文件一样，AI记忆系统也需要定期的&amp;quot;大扫除&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;那些没有上下文关联的碎片信息、那些只出现了一次的无关细节、那些已经被更精确的信息取代的模糊记录——都应该被主动清理。这不是浪费，是维护。&lt;/p&gt;&#xA;&lt;h3 id=&#34;第五种摘要压缩保留要点忘掉细节&#34;&gt;第五种：摘要压缩——保留要点，忘掉细节&lt;/h3&gt;&#xA;&lt;p&gt;你记得去年去日本旅行的整体感受——&amp;ldquo;很好玩，寿司很新鲜，人很多&amp;rdquo;。但你大概率不记得第一天中午在哪家餐厅吃了什么、下午坐了几号线地铁。&lt;/p&gt;&#xA;&lt;p&gt;你的大脑把几百个细节压缩成了一个摘要。这个摘要虽然丢失了细节，但保留了核心体验，而且占用极少的记忆空间。AI也应该学会这种能力——把十次零碎的对话压缩成一条用户画像，而不是把十次对话的原文都存着。&lt;/p&gt;&#xA;&lt;h2 id=&#34;深层逻辑为什么遗忘让ai更聪明&#34;&gt;深层逻辑：为什么遗忘让AI更聪明&lt;/h2&gt;&#xA;&lt;p&gt;说了这么多具体的方法，让我们退一步思考一个更根本的问题：&lt;strong&gt;为什么遗忘反而能让AI更聪明？&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;答案藏在三个层面。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一，检索效率。&lt;/strong&gt; 想象你在一个有100万本书的图书馆里找一本特定的书，和在一个有50本精选书的书架上找同一本书——哪个更快？显然记忆越少越精准。遗忘本质上是一种&amp;quot;预筛选&amp;quot;，让真正重要的信息更容易被找到。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二，泛化能力。&lt;/strong&gt; 人类之所以能从有限的经验中总结出普遍规律，恰恰是因为我们遗忘了太多具体的细节。你不会因为某次在雨天被淋湿就认为&amp;quot;所有雨天都是糟糕的&amp;quot;——你遗忘了那次淋雨的具体细节，只留下了&amp;quot;下雨要打伞&amp;quot;的通用经验。AI也需要这种从特殊到一般的抽象能力，而遗忘是这种能力的前提。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三，适应变化。&lt;/strong&gt; 世界在变，用户的情况在变。一个三个月前的偏好可能已经过时了。如果AI死死记住旧信息不放，它就会像一个刻舟求剑的人——在变化的世界里守着过时的地图导航。遗忘让AI保持&amp;quot;更新&amp;quot;的能力。&lt;/p&gt;&#xA;&lt;h2 id=&#34;这对我们意味着什么&#34;&gt;这对我们意味着什么&lt;/h2&gt;&#xA;&lt;p&gt;如果你是一个AI产品的用户，理解这件事有一个实际意义：&lt;strong&gt;不要期待AI记住你说过的所有话。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;那些承诺&amp;quot;永久记忆一切&amp;quot;的AI产品，可能反而会在长期使用中变得越来越不靠谱。真正好的AI记忆系统应该像一个成熟的人——记住重要的事，忘掉不重要的事，在必要时修正旧记忆，并定期&amp;quot;整理房间&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;如果你是AI开发者，这篇文章想传递的核心信息是：&lt;strong&gt;不要只关注怎么让AI记住更多，更要关注怎么让AI聪明地遗忘。&lt;/strong&gt; 一个精心设计的遗忘策略，可能比一个无限大的记忆库更有价值。&lt;/p&gt;&#xA;&lt;h2 id=&#34;结语&#34;&gt;结语&lt;/h2&gt;&#xA;&lt;p&gt;我们花了很长时间教AI如何记忆。也许是时候教它如何遗忘了。&lt;/p&gt;&#xA;&lt;p&gt;毕竟，人类大脑经过几百万年进化才得出的结论：&lt;strong&gt;遗忘不是失败，是智慧的一部分。&lt;/strong&gt; 这条弯路，AI大概也绕不过去。&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;p&gt;&lt;strong&gt;参考论文与延伸阅读：&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;Generative Agents: Interactive Simulacra of Human Behavior (Park et al., 2023) - 提出了Agent记忆流架构，包含遗忘机制设计&lt;/li&gt;&#xA;&lt;li&gt;MemGPT: Towards LLMs as Operating Systems (Packer et al., 2023) - 将操作系统的虚拟内存概念引入LLM记忆管理&lt;/li&gt;&#xA;&lt;li&gt;A Survey on the Memory Mechanism of Large Language Model based Agents (arXiv, 2024) - 全面综述了LLM智能体的记忆机制&lt;/li&gt;&#xA;&lt;li&gt;Predictive Coding in the Visual Cortex (Rao &amp;amp; Ballard, 1999) - 预测编码理论的经典论文&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;hr&gt;</description>
			</item>
			<item>
				<title>给AI塞了100页文档，它却只记住了头和尾——&#39;中间迷失&#39;现象为什么至今无解，以及正在改变游戏规则的新思路</title>
				<link>https://lingyu7.com/posts/lost-in-the-middle-llm-context-dead-zone-token-gate/</link>
				<pubDate>Sun, 25 Oct 2026 02:30:00 +0800</pubDate>
				<guid>https://lingyu7.com/posts/lost-in-the-middle-llm-context-dead-zone-token-gate/</guid>
				<description>&lt;h2 id=&#34;引言一个你可能亲身踩过的坑&#34;&gt;引言：一个你可能亲身踩过的坑&lt;/h2&gt;&#xA;&lt;p&gt;假设你是一个律师助理，把一份80页的并购合同丢给AI，让它帮你找出第47页关于&amp;quot;竞业禁止&amp;quot;的那段话。你等了30秒，AI回复：&lt;/p&gt;&#xA;&lt;p&gt;&amp;ldquo;在这份合同中，未找到关于竞业禁止的条款。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;你翻到第47页——它就在那里，白纸黑字。&lt;/p&gt;&#xA;&lt;p&gt;这不是AI&amp;quot;看漏了&amp;quot;，而是一个被学术研究反复验证过的系统性缺陷。2023年，斯坦福大学、UC伯克利和Samaya AI的研究团队发表了一篇论文，给了这个现象一个精确的名字：&lt;strong&gt;Lost in the Middle&lt;/strong&gt;——&amp;ldquo;迷失在中间&amp;rdquo;。&lt;/p&gt;&#xA;&lt;p&gt;他们的实验很简单：给模型20份文档，把答案分别放在不同位置。结果画出来的曲线像一个字母U——放在开头和结尾的答案，模型找得又快又准；放在中间的答案，准确率断崖式下跌，有时甚至&lt;strong&gt;比不给任何文档还差&lt;/strong&gt;。&lt;/p&gt;&#xA;&lt;p&gt;你没看错。给模型提供了参考资料，它反而答得更烂了。&lt;/p&gt;&#xA;&lt;h2 id=&#34;为什么ai会迷失在中间&#34;&gt;为什么AI会&amp;quot;迷失在中间&amp;quot;？&lt;/h2&gt;&#xA;&lt;p&gt;要理解这个现象，得先理解大模型是怎么&amp;quot;读&amp;quot;东西的。&lt;/p&gt;&#xA;&lt;h3 id=&#34;注意力不是探照灯更像是黄昏时的余光&#34;&gt;注意力不是探照灯，更像是黄昏时的余光&lt;/h3&gt;&#xA;&lt;p&gt;大模型的核心架构叫Transformer，它靠一种叫&amp;quot;注意力机制&amp;quot;的东西来决定&amp;quot;哪些词重要&amp;quot;。你可以把它想象成一束光——但这束光不是均匀的探照灯，而更像是黄昏时分从窗户照进来的光：窗边最亮，房间中央还行，角落就暗了。&lt;/p&gt;&#xA;&lt;p&gt;具体来说，模型对&lt;strong&gt;开头的信息&lt;/strong&gt;格外敏感。因为注意力计算一开始，模型的&amp;quot;视线&amp;quot;刚刚展开，前面几个token享受到了最完整的关注。同时对&lt;strong&gt;结尾的信息&lt;/strong&gt;也格外敏感——因为模型在生成回答时，最后一个位置的上下文信号最强，就像你读一本书，刚读完的那一页印象最深。&lt;/p&gt;&#xA;&lt;p&gt;而中间呢？它既不享受&amp;quot;首因效应&amp;quot;的红利，也不占&amp;quot;近因效应&amp;quot;的光。注意力强度在中间区域形成一个凹陷——信息明明在那里，但模型的&amp;quot;目光&amp;quot;滑过去了。&lt;/p&gt;&#xA;&lt;h3 id=&#34;还有一个更微妙的问题信息密度&#34;&gt;还有一个更微妙的问题：信息密度&lt;/h3&gt;&#xA;&lt;p&gt;想想你看一本书的习惯。开头通常是背景介绍和核心论点，结尾是结论和总结，中间是什么？过渡、展开、补充说明。从信息价值的角度，开头和结尾的&amp;quot;含金量&amp;quot;本来就可能更高。&lt;/p&gt;&#xA;&lt;p&gt;模型在训练中可能学到了这个模式——&amp;ldquo;重要的东西在两头&amp;rdquo;。于是它把注意力资源往两端倾斜，中间部分得到的关注就更少了。这是一个自我强化的循环。&lt;/p&gt;&#xA;&lt;h2 id=&#34;三年过去了问题消失了吗&#34;&gt;三年过去了，问题消失了吗？&lt;/h2&gt;&#xA;&lt;p&gt;&lt;strong&gt;没有。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;2026年10月23日，一篇发布在开发者社区的技术文章用了一个刺眼的标题：&amp;ldquo;Lost in the Middle: Find Your Context Dead Zone and Fix It Before the Call&amp;rdquo;——找到你AI的&amp;quot;上下文死角&amp;quot;，在上线之前修好它。&lt;/p&gt;&#xA;&lt;p&gt;作者指出了一个令人不安的事实：即便是2026年最新的模型，这个&amp;quot;U型曲线&amp;quot;虽然比2023年平缓了不少，但&lt;strong&gt;从未真正消失&lt;/strong&gt;。你把20份检索到的文档喂给GPT类模型，答案放在中间时，表现仍然会掉20个百分点以上。&lt;/p&gt;&#xA;&lt;p&gt;更值得注意的是，最近一周同时出现了两篇来自顶级机构的新论文，从不同角度试图解决这个问题。它们指向同一个方向：&lt;strong&gt;不是让AI看所有东西，而是让它学会&amp;quot;跳读&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;h2 id=&#34;新思路一像人类一样学会略读&#34;&gt;新思路一：像人类一样学会&amp;quot;略读&amp;quot;&lt;/h2&gt;&#xA;&lt;p&gt;10月19日，来自CMU和UC Berkeley的团队发布了&lt;strong&gt;TokenGate&lt;/strong&gt;。&lt;/p&gt;&#xA;&lt;p&gt;人类阅读一份300页的报告时，不会逐字逐句从头读到尾。你会先扫目录，翻到相关章节，重点看关键段落，其余的一扫而过。TokenGate做的就是这件事——它给模型装了一个&amp;quot;门控&amp;quot;模块，让模型在处理长文本时，学会判断哪些token值得精读、哪些可以跳过。&lt;/p&gt;&#xA;&lt;p&gt;具体怎么实现？它在模型的中间某一层加了一个小型的&amp;quot;评分网络&amp;quot;。这个网络给每一个token打一个&amp;quot;重要性分数&amp;quot;，然后只保留最重要的那一小批继续往上送。不重要的token？直接从这一层开始就不再处理了——既省计算，也省内存。&lt;/p&gt;&#xA;&lt;p&gt;效果如何？在多种任务上，TokenGate实现了&lt;strong&gt;最高11.3倍的首token响应加速&lt;/strong&gt;和&lt;strong&gt;3.4倍的峰值内存降低&lt;/strong&gt;，而且准确率没有下降。&lt;/p&gt;&#xA;&lt;p&gt;这里有一个关键洞察：传统的做法是让模型&amp;quot;看完所有东西再挑重点&amp;quot;，TokenGate反过来——&amp;ldquo;先挑重点，只看重点&amp;rdquo;。这不是偷懒，这恰恰是人类专家阅读长文档的方式。&lt;/p&gt;&#xA;&lt;h2 id=&#34;新思路二分层采样不让任何角落被遗忘&#34;&gt;新思路二：分层采样，不让任何角落被遗忘&lt;/h2&gt;&#xA;&lt;p&gt;几乎同一时间（10月20日），另一支团队提出了&lt;strong&gt;Stratified Sparse Attention（SSA）&lt;/strong&gt;——分层稀疏注意力。&lt;/p&gt;&#xA;&lt;p&gt;如果说TokenGate的思路是&amp;quot;学会跳读&amp;quot;，SSA的思路更像&amp;quot;确保每个角落都被随机抽查到&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;它把注意力机制拆成两层：第一层确定性地关注那些&amp;quot;明确重要&amp;quot;的token（比如包含关键词的句子）；第二层则用一种带修正的采样方法，从剩余token中随机抽取一批来&amp;quot;扫一眼&amp;quot;。这个&amp;quot;扫一眼&amp;quot;不是随便看的——它会用代理注意力分数来估算哪些被跳过的token可能也重要，然后对采样偏差做数学修正。&lt;/p&gt;&#xA;&lt;p&gt;效果是：在128K上下文的极端稀疏条件（只关注1/50的token）下，SSA仍然恢复了&lt;strong&gt;85%的密集注意力性能&lt;/strong&gt;。而此前的最好方法只能恢复到63.8%。&lt;/p&gt;&#xA;&lt;h2 id=&#34;这对普通用户意味着什么&#34;&gt;这对普通用户意味着什么？&lt;/h2&gt;&#xA;&lt;p&gt;说了这么多技术细节，对你日常用AI有什么实际影响？&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一，关键信息放两头。&lt;/strong&gt; 如果你给AI一段长提示词，最重要的指令放在最开头和最结尾。中间放背景说明和参考资料。这不是技巧，这是模型的物理特性决定的。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二，别迷信&amp;quot;上下文窗口越大越好&amp;quot;。&lt;/strong&gt; 一个模型号称支持200K token，不代表你该把所有东西都塞进去。200K是容量上限，不是推荐用量。塞得越多，中间部分被忽略的概率越大。更好的做法是：精选信息、结构化呈现、控制长度。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三，用RAG（检索增强生成）时，注意排序。&lt;/strong&gt; 很多AI应用会先从知识库检索相关文档片段，再塞给模型。如果你检索出10个片段，把最相关的那个放在第一个或最后一个，别放在第五个。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第四，对于长文档场景，留意新技术。&lt;/strong&gt; TokenGate和SSA这类&amp;quot;选择性注意力&amp;quot;技术正在快速成熟。当它们被集成到你使用的产品中时，你会发现AI处理长文档的能力有质的飞跃——不是因为模型变&amp;quot;聪明&amp;quot;了，而是因为它学会了&amp;quot;看重点&amp;quot;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;一个更大的启示&#34;&gt;一个更大的启示&lt;/h2&gt;&#xA;&lt;p&gt;&amp;ldquo;Lost in the Middle&amp;quot;现象揭示的，其实是一个关于信息处理的深层悖论：&lt;strong&gt;拥有更多信息，不等于利用得更好。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;这不只是AI的问题。人类也一样——你收藏了500篇&amp;quot;稍后再读&amp;quot;的文章，最后真正读完的可能不到50篇。你的浏览器开了30个标签页，但注意力真正集中的只有一两个。&lt;/p&gt;</description>
			</item>
	</channel>
</rss>
