<?xml version="1.0" encoding="utf-8" standalone="yes"?>
<rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom">
	<channel>
		<title>AI基础理论 on 灵语AI</title>
		<link>https://lingyu7.com/tags/ai%E5%9F%BA%E7%A1%80%E7%90%86%E8%AE%BA/</link>
		<description>Recent content in AI基础理论 on 灵语AI</description>
		<generator>Hugo</generator>
		<language>zh-CN</language>
		
		
		
		
			<lastBuildDate>Fri, 24 Jul 2026 02:31:18 +0800</lastBuildDate>
		
			<atom:link href="https://lingyu7.com/tags/ai%E5%9F%BA%E7%A1%80%E7%90%86%E8%AE%BA/index.xml" rel="self" type="application/rss+xml" />
			<item>
				<title>AI真的「理解」文字吗？——符号接地问题的百年追问</title>
				<link>https://lingyu7.com/posts/symbol-grounding-problem/</link>
				<pubDate>Fri, 24 Jul 2026 02:31:18 +0800</pubDate>
				<guid>https://lingyu7.com/posts/symbol-grounding-problem/</guid>
				<description>&lt;hr&gt;&#xA;&lt;h2 id=&#34;description-ai能回答你的问题能写诗能编程但它是真的理解文字还是只是在玩一场精妙的文字接龙游戏符号接地问题追问的正是这个根本问题符号如何获得意义&#34;&gt;description: &amp;ldquo;AI能回答你的问题、能写诗、能编程——但它是真的「理解」文字，还是只是在玩一场精妙的文字接龙游戏？符号接地问题追问的正是这个根本问题：符号如何获得意义？&amp;rdquo;&lt;/h2&gt;&#xA;&lt;h2 id=&#34;引言你和一个ai的对话和真正的理解有多远&#34;&gt;引言：你和一个AI的对话，和真正的「理解」有多远？&lt;/h2&gt;&#xA;&lt;p&gt;假设你和一个AI聊了五分钟。&lt;/p&gt;&#xA;&lt;p&gt;你问：&amp;ldquo;猫会抓老鼠吗？&amp;rdquo;&#xA;AI答：&amp;ldquo;会的，猫是老鼠的天敌，猫科动物的捕猎本能很强。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;你问：&amp;ldquo;那猫为什么喜欢玩毛线球？&amp;rdquo;&#xA;AI答：&amp;ldquo;因为毛线球的滚动和跳跃模拟了老鼠的运动轨迹，触发了猫的捕猎本能。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;你说：&amp;ldquo;帮我写一个关于猫和老鼠的童话故事。&amp;rdquo;&#xA;AI很快写了一个汤姆和杰瑞式的有趣故事。&lt;/p&gt;&#xA;&lt;p&gt;看起来，这个AI很理解&amp;quot;猫&amp;quot;和&amp;quot;老鼠&amp;quot;是什么，对吧？&lt;/p&gt;&#xA;&lt;p&gt;但如果我问你：&lt;strong&gt;这个AI见过猫吗？摸过猫吗？听过猫叫吗？被猫抓过吗？&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;答案是：没有。&lt;/p&gt;&#xA;&lt;p&gt;它只在&amp;quot;文字的世界&amp;quot;里存在。它读过海量的文本，知道&amp;quot;猫&amp;quot;和&amp;quot;毛线球&amp;quot;、&amp;ldquo;喵喵叫&amp;rdquo;、&amp;ldquo;抓老鼠&amp;quot;这些词经常一起出现。但它从未——永远无法——真正地&amp;quot;看到&amp;quot;一只猫从窗台上跳下来。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;那么问题来了：一个从未接触过真实世界的系统，能真正&amp;quot;理解&amp;quot;关于世界的语言吗？&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;这个问题，不是哲学家的玄想。它是一个被正式命名的科学问题，叫&lt;strong&gt;符号接地问题&lt;/strong&gt;。它已经存在了三十多年，到今天依然没有定论。&lt;/p&gt;&#xA;&lt;p&gt;而2026年的AI发展，让这个问题变得更加紧迫。&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;h2 id=&#34;一符号接地问题一个词典里的死循环&#34;&gt;一、符号接地问题：一个&amp;quot;词典里的死循环&amp;rdquo;&lt;/h2&gt;&#xA;&lt;p&gt;1990年，认知科学家史蒂文·哈纳德（Stevan Harnad）提出了这个问题。&lt;/p&gt;&#xA;&lt;p&gt;他用一个简单的比喻来说明：&lt;/p&gt;&#xA;&lt;p&gt;想象你是一个外星人，来到地球。你捡到一本英汉词典，想通过它学习中文。你翻开第一页，看到&amp;quot;猫&amp;quot;这个字，旁边的解释是：&amp;ldquo;一种小型哺乳动物，善捕鼠。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;你不懂&amp;quot;哺乳动物&amp;quot;是什么，于是查这个词——&amp;ldquo;哺乳动物：用乳汁哺育幼崽的脊椎动物。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;你不懂&amp;quot;脊椎动物&amp;quot;是什么，又往下查——&amp;ldquo;脊椎动物：有脊柱的动物。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;你不懂&amp;quot;脊柱&amp;quot;是什么，再查——&amp;ldquo;脊柱：脊椎动物的中轴骨骼。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;你发现了吗？你陷入了一个死循环。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;每个词的定义，都是用其他词来写的。你翻来翻去，永远在符号的圈子里打转，永远找不到一个词和一个&amp;quot;真实世界的东西&amp;quot;之间的直接连接。&lt;/p&gt;&#xA;&lt;p&gt;哈纳德说，这就是纯符号系统面临的根本困境：&lt;strong&gt;符号之间的无限循环。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;人类之所以能跳出这个循环，是因为我们有身体、有感官——我们见过猫、摸过猫、被猫抓过、听过猫打呼噜。这些非符号的感官经验，为&amp;quot;猫&amp;quot;这个符号提供了&amp;quot;接地&amp;quot;（grounding）的基础。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;而一个纯文本的AI，本质上就是那个外星人。&lt;/strong&gt; 它只拥有词典，没有身体，没有感官，没有真实世界的体验。&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;h2 id=&#34;二哈纳德的三层方案从感知到符号的阶梯&#34;&gt;二、哈纳德的三层方案：从感知到符号的阶梯&lt;/h2&gt;&#xA;&lt;p&gt;哈纳德没有只提出问题，他给出了一个解决方案的框架，分三层：&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第一层：图像式表征（iconic representations）&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;这是最底层，直接与感知经验对应。你看到一只猫的视觉形象，听到猫的叫声，感受到猫毛的柔软——这些都是&amp;quot;图像式表征&amp;quot;。它们不是抽象符号，而是对感官输入的&amp;quot;模拟&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第二层：类别表征（categorical representations）&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;你见过很多不同的猫：橘猫、黑猫、白猫、胖猫、瘦猫、长毛猫、短毛猫……虽然它们各不相同，但你能把它们归为&amp;quot;猫&amp;quot;这个类别。这就是&amp;quot;类别表征&amp;quot;——从具体感知到抽象概念的中间层。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;第三层：符号表征（symbolic representations）&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;基于类别，你构建了关于&amp;quot;猫&amp;quot;的知识体系：&amp;ldquo;猫是哺乳动物&amp;rdquo;、&amp;ldquo;猫会抓老鼠&amp;rdquo;、&amp;ldquo;猫的平均寿命是12-15年&amp;rdquo;……这一层就是我们通常说的&amp;quot;知识&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;哈纳德的核心观点是：符号必须从下往上、从感知到类别再到符号，逐层接地，才能获得真正的意义。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;如果只有最上层的符号层（就像现在的LLM），没有下层的感知基础，符号就是&amp;quot;空转&amp;quot;的——它们彼此连接，但从未触达真实世界。&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;h2 id=&#34;三争议ai到底是随机鹦鹉还是真的有理解&#34;&gt;三、争议：AI到底是&amp;quot;随机鹦鹉&amp;quot;还是真的有理解？&lt;/h2&gt;&#xA;&lt;p&gt;这个问题在AI界引发了激烈的争论，形成了三种主要立场。&lt;/p&gt;&#xA;&lt;h3 id=&#34;立场一随机鹦鹉论&#34;&gt;立场一：「随机鹦鹉」论&lt;/h3&gt;&#xA;&lt;p&gt;2020年，语言学家艾米丽·本德（Emily Bender）和她的同事提出了一个尖锐的批评：&lt;strong&gt;大语言模型只是在&amp;quot;随机鹦鹉&amp;quot;——它们能模仿语言的模式，但并不真正理解内容。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;就像一个会说话的鹦鹉，它能模仿你说&amp;quot;你好&amp;quot;，但它并不理解&amp;quot;你好&amp;quot;是什么意思。LLM只是在海量文本中学习到&amp;quot;猫&amp;quot;和&amp;quot;老鼠&amp;quot;经常一起出现，所以当你说&amp;quot;猫&amp;quot;的时候，它知道下一个词可能是&amp;quot;老鼠&amp;quot;——但这不等于它&amp;quot;理解&amp;quot;了猫和老鼠的关系。&lt;/p&gt;&#xA;&lt;h3 id=&#34;立场二肯定论llm确实有某种理解&#34;&gt;立场二：肯定论——LLM确实有某种理解&lt;/h3&gt;&#xA;&lt;p&gt;另一派研究者认为，LLM在训练中构建了关于世界的&amp;quot;心理模型&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;支持这一观点的证据在增加：&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;2023年，Anthropic的研究发现，LLM的内部神经元确实编码了具体的概念——比如&amp;quot;金门大桥&amp;quot;的神经元，在提到金门大桥时会激活，不管语境是&amp;quot;金门大桥在哪&amp;quot;还是&amp;quot;金门大桥有多长&amp;quot;。&lt;/li&gt;&#xA;&lt;li&gt;更近期的研究表明，LLM能进行推理、类比、计划——这些能力很难用&amp;quot;随机鹦鹉&amp;quot;来解释。&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h3 id=&#34;立场三中间路线有局限的理解&#34;&gt;立场三：中间路线——&amp;ldquo;有局限的理解&amp;rdquo;&lt;/h3&gt;&#xA;&lt;p&gt;目前最受支持的立场是中间路线：&lt;strong&gt;LLM具备&amp;quot;推理语义&amp;quot;——理解符号之间的逻辑关系；但缺乏完整的&amp;quot;指称语义&amp;quot;——符号与真实世界对象的对应。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;简单说：AI知道&amp;quot;猫&amp;quot;和&amp;quot;毛线球&amp;quot;之间的概念关系，但它不知道&amp;quot;猫&amp;quot;这个符号对应着一个真实的、毛茸茸的、会呼噜呼噜叫的生物。&lt;/p&gt;&#xA;&lt;p&gt;这就像一个人从物理课本上学会了所有关于&amp;quot;火&amp;quot;的知识——火的化学方程式、燃烧的条件、火的温度——但他从未真正见过火、靠近过火、被火烫过。你说他&amp;quot;理解&amp;quot;火吗？理解了一些。但和真正摸过火的人比，他的理解是&amp;quot;残缺的&amp;quot;。&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;h2 id=&#34;四多模态是答案吗当ai开始看世界&#34;&gt;四、多模态是答案吗？——当AI开始&amp;quot;看&amp;quot;世界&lt;/h2&gt;&#xA;&lt;p&gt;如果问题的根源在于AI只有文字没有感官，那么一个自然的解决方案就是：&lt;strong&gt;给AI装上&amp;quot;眼睛&amp;quot;和&amp;quot;耳朵&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;这就引出了多模态模型——同时处理文本、图像、音频、视频的AI模型。&lt;/p&gt;&#xA;&lt;p&gt;2021年，OpenAI的CLIP模型首次展示了语言和视觉的联合学习。CLIP在4亿张图片-文字对上进行训练，学会了将&amp;quot;猫&amp;quot;这个单词和猫的图片联系起来。&lt;/p&gt;&#xA;&lt;p&gt;2023年之后的GPT-4V、Gemini、以及2025-2026年的多模态模型，进一步将这种能力推向了新的高度。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;问题是：多模态解决了符号接地问题吗？&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;答案是：&lt;strong&gt;部分解决，但没有完全解决。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;多模态确实让AI多了一层&amp;quot;接地&amp;quot;——&amp;ldquo;猫&amp;quot;这个符号不再只是和其他文本符号关联，还和猫的视觉特征关联。但这仍然不是&amp;quot;真正的接地&amp;rdquo;：&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;AI看到的图片是二维的，不是真实的猫&lt;/li&gt;&#xA;&lt;li&gt;AI没有触觉、没有嗅觉、没有身体与世界的互动&lt;/li&gt;&#xA;&lt;li&gt;AI没有&amp;quot;被猫抓过&amp;quot;的痛感，没有&amp;quot;猫毛蹭到腿上&amp;quot;的触感&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;p&gt;&lt;strong&gt;真正的接地，可能需要具身——一个能感知、能行动、能与环境互动的物理身体。&lt;/strong&gt;&lt;/p&gt;</description>
			</item>
			<item>
				<title>AI不需要你教它——它自己就从例子中学会了，甚至连DNA都不放过</title>
				<link>https://lingyu7.com/posts/ai%E4%B8%8D%E9%9C%80%E8%A6%81%E4%BD%A0%E6%95%99%E5%AE%83-%E5%AE%83%E8%87%AA%E5%B7%B1%E5%B0%B1%E4%BB%8E%E4%BE%8B%E5%AD%90%E4%B8%AD%E5%AD%A6%E4%BC%9A%E4%BA%86-%E7%94%9A%E8%87%B3%E8%BF%9Edna%E9%83%BD%E4%B8%8D%E6%94%BE%E8%BF%87/</link>
				<pubDate>Wed, 22 Jul 2026 02:29:00 +0800</pubDate>
				<guid>https://lingyu7.com/posts/ai%E4%B8%8D%E9%9C%80%E8%A6%81%E4%BD%A0%E6%95%99%E5%AE%83-%E5%AE%83%E8%87%AA%E5%B7%B1%E5%B0%B1%E4%BB%8E%E4%BE%8B%E5%AD%90%E4%B8%AD%E5%AD%A6%E4%BC%9A%E4%BA%86-%E7%94%9A%E8%87%B3%E8%BF%9Edna%E9%83%BD%E4%B8%8D%E6%94%BE%E8%BF%87/</guid>
				<description>&lt;h2 id=&#34;引言你教ai的方式可能彻底错了&#34;&gt;引言：你教AI的方式，可能彻底错了&lt;/h2&gt;&#xA;&lt;p&gt;想象你要教一个朋友认识一种新水果。&lt;/p&gt;&#xA;&lt;p&gt;你拿出了一个芒果，说：&amp;ldquo;这是芒果。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;然后你拿出第二个芒果，说：&amp;ldquo;这也是芒果。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;到第三个的时候，你朋友自己就学会了——&amp;ldquo;我懂了，芒果是这种黄色的、有甜味的东西。&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;这不神奇。人类每天都在做这种事。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;但AI也能做同样的事，而且方式比人类更不可思议。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;你给它几个例子，它就能&amp;quot;学会&amp;quot;一个新任务——不用重新训练，不用调整参数，不用更新模型权重。你只是把几个例子放在它的&amp;quot;输入框&amp;quot;里，它就能按照你的意图去执行。&lt;/p&gt;&#xA;&lt;p&gt;这种能力，叫做&lt;strong&gt;上下文学习（In-Context Learning, ICL）&lt;/strong&gt;。&lt;/p&gt;&#xA;&lt;p&gt;你可能会想：&amp;ldquo;这有什么了不起的？不就是让AI记住几个例子然后模仿吗？&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;但问题在于——&lt;strong&gt;没有人知道它为什么能做到。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;2020年GPT-3横空出世时，1750亿参数规模让ICL能力&amp;quot;涌现&amp;quot;了。但六年过去了，我们对这个问题的理解，才刚刚开始触及核心。&lt;/p&gt;&#xA;&lt;p&gt;而2026年的一项新发现，把这个问题推向了更深的层次：&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;ICL不仅仅是人类语言的专属能力。它在DNA序列模型上，同样涌现了。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;h2 id=&#34;一什么是上下文学习它比你想象的更奇怪&#34;&gt;一、什么是&amp;quot;上下文学习&amp;quot;？——它比你想象的更奇怪&lt;/h2&gt;&#xA;&lt;p&gt;先理解ICL到底是什么。&lt;/p&gt;&#xA;&lt;p&gt;想象你是一个大模型，被训练来&amp;quot;预测下一个词&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;训练时，你读了整个互联网——从维基百科到Reddit论坛，从学术论文到菜谱。你学会的是：&lt;strong&gt;给定前面的话，猜出后面的话最可能是什么。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;然后有一天，有人给你看了一段话：&lt;/p&gt;&#xA;&lt;blockquote&gt;&#xA;&lt;p&gt;&amp;ldquo;把英文翻译成中文：&#xA;hello -&amp;gt; 你好&#xA;good morning -&amp;gt; 早上好&#xA;I love AI -&amp;gt; &amp;quot;&lt;/p&gt;&#xA;&lt;/blockquote&gt;&#xA;&lt;p&gt;你还记得吗？你从来没被专门训练过&amp;quot;翻译任务&amp;rdquo;。你只是被训练来&amp;quot;预测下一个词&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;但你的内部机制做了一件奇怪的事：&lt;strong&gt;你从给出的例子中&amp;quot;提取&amp;quot;了一个模式，然后把&amp;quot;翻译任务&amp;quot;转化成了&amp;quot;预测下一个词&amp;quot;任务。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;你看到三个英文-中文配对后，自动推断出：哦，这个上下文的规则是&amp;quot;把英文翻译成中文&amp;quot;。所以当看到&amp;quot;I love AI&amp;quot;时，你预测下一个词是&amp;quot;我爱人工智能&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;这就是ICL——不需要额外训练，不需要梯度更新，仅仅通过几个例子，模型就学会了新任务。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;听起来很神奇，对吧？&lt;/p&gt;&#xA;&lt;p&gt;但更神奇的事情是：&lt;strong&gt;这个能力不是任何人有意识设计出来的。&lt;/strong&gt; 没有人写代码说&amp;quot;让GPT-3学会从例子中学习&amp;quot;。它只是被训练来预测下一个词，然后这个能力就自己涌现了。&lt;/p&gt;&#xA;&lt;p&gt;就像你种了一棵苹果树，结果它不仅长了苹果，还长出了柠檬——你完全不确定它是怎么做到的。&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;h2 id=&#34;二传统的解释icl是语言的副产品&#34;&gt;二、传统的解释：ICL是语言的&amp;quot;副产品&amp;quot;&lt;/h2&gt;&#xA;&lt;p&gt;对于ICL为什么会出现，最初的主流解释是：&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;ICL是语言模型在语言数据上训练的&amp;quot;副产品&amp;quot;。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;逻辑是这样的：&lt;/p&gt;&#xA;&lt;ol&gt;&#xA;&lt;li&gt;人类语言中充满了&amp;quot;类比&amp;quot;和&amp;quot;模式&amp;quot;——比如我们经常会说&amp;quot;就像……一样&amp;quot;、&amp;ldquo;例如……&amp;rdquo;&lt;/li&gt;&#xA;&lt;li&gt;语言模型在训练时见过了无数这样的例子&lt;/li&gt;&#xA;&lt;li&gt;所以它学会了&amp;quot;从例子中推测规则&amp;quot;的通用能力&lt;/li&gt;&#xA;&lt;li&gt;这个能力被&amp;quot;迁移&amp;quot;到了所有任务上&lt;/li&gt;&#xA;&lt;/ol&gt;&#xA;&lt;p&gt;这个解释听起来很合理，对吧？甚至有点&amp;quot;理所当然&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;但2026年，这个解释被彻底推翻了。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;hr&gt;&#xA;&lt;h2 id=&#34;三颠覆性的发现icl在dna模型上同样涌现&#34;&gt;三、颠覆性的发现：ICL在DNA模型上同样涌现&lt;/h2&gt;&#xA;&lt;p&gt;Johns Hopkins大学的研究团队做了一个实验。&lt;/p&gt;&#xA;&lt;p&gt;他们选择了Evo2——一个被训练来预测DNA序列的模型。DNA序列由A、C、G、T四个碱基组成，像一本用四个字母写成的天书。&lt;/p&gt;&#xA;&lt;p&gt;Evo2的训练目标很简单：给定一段DNA序列，预测下一个碱基是什么。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;注意：Evo2从来没有见过任何人类语言数据。&lt;/strong&gt; 它不知道&amp;quot;你好&amp;quot;是什么意思，没见过&amp;quot;翻译任务&amp;quot;，也没读过&amp;quot;例子&amp;quot;这个概念的任何一个字。&lt;/p&gt;&#xA;&lt;p&gt;但研究团队做了以下测试：&lt;/p&gt;&#xA;&lt;p&gt;他们给Evo2看一些&amp;quot;例子&amp;quot;——比如，给出一段DNA序列，然后在末尾加上对应的功能标注。然后再给一段新的DNA序列，问Evo2：&amp;ldquo;根据前面的例子，这段序列的功能标注应该是什么？&amp;rdquo;&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;结果：Evo2展现出了和GPT-3完全一样的ICL模式——随示例数量增加，性能稳定提升。&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;DNA模型，没有接触过任何人类语言，没有&amp;quot;类比&amp;quot;概念，没有&amp;quot;例子&amp;quot;这个训练数据——但它仍然学会了&amp;quot;从例子中学习&amp;quot;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;这个发现彻底改变了我们对ICL的理解：&lt;/strong&gt;&lt;/p&gt;&#xA;&lt;p&gt;ICL不是人类语言的副产品。&#xA;ICL不是&amp;quot;类比推理&amp;quot;的产物。&#xA;ICL甚至不是&amp;quot;文本&amp;quot;的专属能力。&lt;/p&gt;&#xA;&lt;p&gt;&lt;strong&gt;ICL是——当一个模型被训练预测足够复杂的序列数据中的下一个元素时，自然涌现的通用能力。&lt;/strong&gt;&lt;/p&gt;</description>
			</item>
	</channel>
</rss>
