设万维读者为首页 万维读者网 -- 全球华人的精神家园 广告服务 联系我们 关于万维
 
首  页 新  闻 视  频 博  客 论  坛 分类广告 购  物
搜索>> 发表日志 控制面板 个人相册 给我留言
帮助 退出
张晋中的博客  
科技进展观察。  
https://blog.creaders.net/u/34950/ > 复制 > 收藏本页
网络日志正文
AGI还缺少什么? 2026-07-16 07:57:46

AGI还缺少什么?

    ——不是更大的模型,而是知道自己什么时候该换一张地图 

你有没有过这样的经历?

在一个方向上走了很久,越努力越看不到结果,却舍不得停下来——因为已经投入了太多。你告诉自己"再坚持一下",告诉自己"量变产生质变",告诉自己"成功就在下一次迭代"。

但你心底有一个微弱的声音在问:万一方向本身就是错的呢?

你需要的可能不是"再坚持一下",而是有人告诉你:这个方向,可能已经错了。

2026年的AI,模型越来越大,算力越来越强,能力越来越惊人。但一个更深的问题正在浮现:当优化本身开始失效时,谁来告诉AI"停下来"?

当一个人在一个错误的方向上狂奔,他会疲惫、会怀疑、会失眠。但一个AI系统不会。它只会继续优化,继续降低损失,继续在同一个框架里寻找更优解——直到资源耗尽,或者直到它产生出的错误已经无法被下游系统吸收。

本文想提出一个判断:AGI可能缺少的不是更强的能力,而是一种"知道自己什么时候应该停下来、重新判断方向"的能力。

暂且称之为二阶智能——不是解决问题的能力,而是判断"当前的问题框架是否仍然有效"的能力。

一、所有智能都面临同一个困境

一个有限的系统,不可能把整个世界完整地装进自己。

这是一句近乎同义反复的陈述。但它的含义远比表面看起来的深刻。它意味着:任何活着的东西,都必须在某个时刻做出取舍。

人的大脑大约有860亿个神经元,每个神经元大约有1000个突触连接。这是一个庞大的数字——但宇宙的复杂程度,远远超过了任何一个有限系统能够完整表征的上限。你不可能记住过去每一秒的感受,不可能理解每一个陌生人的完整人生,不可能预测未来每一缕风的方向。

面对一个远比自身复杂的开放世界,它只有一个选择:把无边无际的领土,压缩成一张有限的地图。

所谓思考、建模、理解,本质上都是一种压缩(Compression)。

你读到"巴黎"两个字,脑海中浮现出埃菲尔铁塔、塞纳河、左岸的咖啡馆——但你从来没有、也不可能把巴黎的全部实在装进脑袋。你拥有的是一个压缩版本。它足以让你谈论这座城市、规划一次旅行、理解它的文化位置,但它远远不是巴黎本身。

科学是压缩。牛顿用三个运动定律和一条万有引力定律,解释了从苹果落地到行星运转的广阔现象。这是惊人的压缩——三句话覆盖了一个巨大的领域。但正因为它是压缩,它才有适用范围,才有被爱因斯坦修正的那一天。

语言是压缩。一个"爱"字,涵盖亲子之爱、恋人之爱、对理想的忠诚、对故土的眷恋。每一个使用它的人,都在用自己的经验去填充这个符号的空隙。

任何压缩都会有所取舍。总有一些东西被保留,也总有一些东西被忽略。于是,地图与领土之间,永远留下一道无法消除的裂隙。

这个裂隙,称之为剩余(Residual)。

剩余不是错误。它不是测量误差,不是噪声,不是可以被算法消除的缺陷。它是任何有限系统面对世界时无法逃避的命运。

地图永远不等于领土。

但剩余本身只是"存在",不构成问题。当你用一张城市地图时,你不会在意上面没有标出每一棵树的精确位置——那对大多数导航需求而言是不必要的剩余。只有当剩余开始积累,并呈现出结构性的、非随机的特征时,它才从裂隙变成了信号。

比如你按着地图走,却三次发现地图上标注为"道路"的地方实际上是一堵墙。一次可能是图纸过时,两次可能是测绘错误,三次——三次之后,你不再把它当作普通误差。

那个信号是:你当前的压缩方式,可能已经到了极限。

二、当"继续努力"本身变成问题

当一个系统收到"当前压缩方式可能到了极限"的信号,它会如何回应?

最自然的回应是:继续优化。

这是一个合理的本能。历史上绝大多数问题,确实可以通过在现有框架内持续努力来解决。参数不够精确就继续调参,数据不够多就继续收集,算力不够强就继续扩展。这套方法论在过去十年里带我们走过了很长的路。

所有优化都依赖一个隐含假设:你当前的框架,仍然能够应对眼前的问题。

大多数时候,这个假设是成立的。但偶尔——不常见,但一旦发生就极其关键——这个假设会失效。

当这个假设被违反时,继续优化反而会让系统陷入更深的困境。每一次修补都在增加复杂度,却再也换不来能力的相应增长。

这就像一个人用一张过时的地图在城市里开车。他发现自己总是到不了目的地。他的第一反应是"我开得不够快",于是踩下油门。然后他发现还是到不了,于是换了一条路,再踩油门。每一次调整都在增加行程的复杂度,但问题根本不是速度——而是方向。

他开得越快,错得越远。

这种状态叫作复杂度-能力背离(Complexity-Capability Divergence,CCD)。

判断这个状态是否发生,看三个信号:

第一,边际效益递减。 每多投入一分,产出几乎不再增加。增加GPU数量、增加数据量、增加参数规模,带来的性能提升越来越小,甚至出现负增长。

第二,错误呈现结构性。 失败不再是随机的,而是集中在某些特定模式上。LLM的幻觉不是均匀分布的——它更容易在推理链较长的任务上出错,更容易在低资源语言上出错,更容易在处理否定句和空间关系时出错。这些不是偶然失误,而是系统性偏差。

第三,修补带来新问题。 为了解决一个异常而引入的修正,在更高层面产生了同样类型的新异常。你打了补丁A去修复问题X,结果在更复杂的场景下,同一个问题以变体Y的形式重新出现。

当你同时看到这三个信号时,你面临的已经不是"哪里还不够精确",而是:你正在解决错误的问题。当前这个优化空间本身,可能已经失效了。

这不是"做得不够好"的问题。这是在用"如何更精确地使用一张错误地图"来回应"我是否需要换一张地图"的问题。

三、认知层级:一座被忽略的桥

到这里,有两个独立成立的理论片段:

认识论层面:Compression → Residual。任何有限系统必然面临模型与世界的裂隙。

工程与架构层面:需要某种机制来管理这种裂隙。

但这两个层面之间,缺一座桥。

这座桥就是认知层级(Layer)。

要理解认知层级为什么重要,我们需要先理解"定位"这件事为什么重要。

当你收到"模型出了偏差"这个信号时,你实际上面对的不是一个问题,而是两个性质完全不同的问题。第一个问题是:这个偏差来自哪里?第二个问题是:我该怎么处理它?

大多数人直接跳到了第二个问题。因为他们默认第一个问题的答案是"偏差来自参数不够精确"。但偶尔——正是那些最关键的场合——第一个问题的真正答案是"偏差来自框架本身"。

你无法用"继续调参"来解决"框架不对"的问题。你无法通过修修补补来让牛顿力学解释水星近日点的进动。你无法靠更精细的管理来挽救一个已经过时的商业模式。

认知层级的作用,就是为了让系统能够回答"偏差来自哪里"这个问题。

认知层级不是为了分类知识而存在。它真正的作用,是帮助系统回答另一个问题:

这个剩余,究竟来自哪一个层次?

如果一个剩余可以被定位到当前层级的某个局部环节,修复是可行的——调整参数、增加隐藏变量、优化局部策略,都属于这一类。

但如果剩余呈现出结构化的、系统性的特征,并且无法被定位到任何局部,那么它可能是在说:当前这个层级本身,已经不工作了。

这就是为什么需要"层级"——不是因为分层很优雅,而是因为没有分层,就无法区分"参数不够精确"和"框架已经失效"这两种性质完全不同的问题。

没有层级,所有的剩余都会被当作同一种东西来处理。所有的错误都会被误诊为"精度不够"。所有的异常都会被导向同一个处方:继续优化。

于是,整个逻辑链变成:

Compression → Residual → 定位(Layer) → CCD → 换地图(Governance)

Residual解释了为什么需要Layer,Layer解释了为什么需要Governance。

这根梁,是整个理论焊死的关键。

四、人类为什么能做到"换地图"?

人类天然拥有多个认知层级:

世界 → 感知 → 对象 → 概念 → 规则 → 模型 → 元模型 → 世界观 → 价值观

不同层之间有清晰的边界。

你知道这是数学,那是物理,这是经济,那是伦理。当你在思考一道数学题时,你不会突然引入"公平"或"正义"作为变量——除非你被要求做伦理判断。你能区分"这是一个计算问题"和"这是一个分配问题",并且在两者之间切换,知道它们遵循不同的规则。

人可以在一句话里自然切换:

"这里应该用统计学。"

"这里不能用牛顿,要用相对论。"

"这里不是技术问题,是制度问题。"

人不仅拥有知识,还知道知识属于哪一层。

这种"知道属于哪一层"的能力,远比表面看起来的深刻。它意味着人不仅能在某一层内进行高效推理,还能在推理之前先做一件事:选择在哪一层进行推理。

你在看到一道数学题时,默认调用了数学层。你在面对道德困境时,默认调用伦理层。你在阅读文学作品时,默认调用审美层。你几乎从来不会搞混它们。

但更关键的是,你还能在某一层推理遇到障碍时,主动意识到"问题可能出在这一层本身",然后切换到另一层。

水星近日点的异常,在牛顿框架内无论怎么修补都无法解释。真正的突破是:有人意识到,问题不出在计算,而出在"我们用来计算的那套框架"——于是从牛顿力学跃迁到了广义相对论。

一个医生面对标准治疗方案反复失效时,真正的困难不是"下一个药开什么",而是"我是不是应该推翻自己的诊断假设"——从"这个病用这个方案"切换到"我可能从一开始就诊断错了"。

一个创业者在某个商业模式上越做越吃力,真正的智慧不是"更精细地管理",而是"这个模式本身是不是已经过时了"——从"如何做得更好"切换到"是否还值得继续做"。

这些人在做的事情,不是更努力地在当前地图上优化路径。

他们做的事情是:停止优化,换一张地图。

更重要的是,人类能做一件更奇怪的事:递归自我对象化(Recursive Self-Objectification)。

人脑能够跳到一个更高的层次,把刚才还在沉浸于决策中的那个"低维的我"推出去,变成客观世界的一部分,成为新的"领土"。

这就是为什么人可以说:

"昨天的我错了。"

昨天的自己,就是今天新的"领土"。你审视自己昨天的行为,就像审视另一个人的行为。你问自己:"我当时为什么要那样做?"——你已经不再是当时的你,你跳到了更高的层级。

完整的循环是:

模型 → 剩余 → 对象化 → 新模型

这个循环把剩余、CCD、递归对象化、治理层全部串在一起。

而当前的LLM,没有任何机制完成这一步。它没有"昨天的自己",只有当前时刻的权重。

五、但LLM为什么做不到?

这是全文最核心的观察。也是最需要小心表述的地方。

一个容易引起误解的说法是:"LLM没有认知层级。"

AI研究者会立刻反驳:Transformer内部形成了层级表示,不同Attention head承担了不同功能,LLM也能根据上下文在数学、法律、编程等模式之间切换。

这些反驳都是事实。但它们没有击中真正的问题。

更精确的表述是:

Transformer内部形成了丰富的表示结构,但这些结构并不是一种可显式访问、可稳定治理、可独立评估的认知层级。

要理解这一点,需要回到Transformer最根本的设计选择。

Transformer最大的成功,在于它把几乎所有认知任务,都翻译成了同一种形式。

数学。法律。程序设计。文学。医学。金融。

图片可以被翻译成Token。声音可以被翻译成Token。DNA序列可以被翻译成Token。程序代码可以被翻译成Token。

世界最终都被翻译成Token。

然后统一变成一个目标:

预测下一个Token。

这就是LLM的革命性所在——它用一个极其简单的目标函数,统一了几乎所有的认知任务。无论你输入的是法律条文还是诗歌,无论你期望的输出是数学证明还是代码补全,系统内部都在做同一件事:计算下一个Token的概率分布。

正是这种惊人的统一性,使LLM拥有了强大的泛化能力。

也正因为如此,不同层次知识之间原本清晰的边界,被一起压缩了。

LLM的完整路径是:

世界 → Token → Embedding → Attention → Parameter → Next Token Prediction

数学和诗歌,在这种压缩机制下,失去了本质区别——它们都变成了"给定前文,预测下一个词"的问题。

这确实让LLM拥有了惊人的能力:它可以写诗,可以解微积分,可以写代码,可以分析法律条款——而且可以在几秒钟之内从一个领域切换到另一个领域。

但它也因此失去了一样东西:它不知道自己正在切换到另一个领域。

它能够隐式地切换知识,却缺少一个显式的机制来判断:

"我现在应该切换到哪一种知识框架?"

它学会了所有层级的知识,却把它们压缩进了同一个平面。它拥有内容,却缺少内容之间的治理结构。

这也解释了为什么LLM非常容易犯一类特定的错误:

把统计当逻辑;

把类比当证明;

把经验当规律;

把局部模式当普遍真理。

因为在它的参数空间里,这些东西本来就是连续混合的,没有边界。

它可以在一个数学问题上表现得像一个训练有素的数学家,然后在下一个问题中突然把因果关系和相关性混为一谈。它不是在两种"框架"之间切换,而是在同一个连续空间中流动——有时候流到了正确的地方,有时候流到了错误的地方。

它会切换知识,却不会决定什么时候该切换。

一个人类数学家在解决数学问题时会说:"这是数学,我需要用逻辑推理。"LLM不会说这句话。它只是生成下一个最有可能的Token。当那个Token恰好落在数学的分布区间内时,看起来像是"在做数学";当它落在错误的区间时,就产生了幻觉。

关键在于:它无法区分"这一次落在了数学区间"和"上一次落在了数学区间"有什么性质上的不同。它只知道概率。

六、Alignment与Governance的差别

在讨论治理层之前,有必要先说明它与当前AI领域中另一个热门概念——对齐(Alignment)——之间的关系。

很多人认为,对齐就是让AI更符合人类的期望。技术上,它通过RLHF(基于人类反馈的强化学习)等方式,调整模型的输出分布,让回答更有用、更安全、更符合人类的偏好。

但从本文的框架来看,对齐解决的是另一个层面的问题。

对齐做的事情,是在已有的参数空间内,对模型的行为进行校正。它关心的是"如何回答",而不是"回答所依赖的框架是否仍然有效"。

打个比方:想象你有一张城市地图。对齐解决的是"如何用这张地图更准确地导航"——它让你画得更精细、标注得更清楚。

而本文讨论的问题是:这张地图本身,是不是已经过时了?

一个经过完美对齐的模型,可能在所有常规问题上表现得无可挑剔,但一旦遇到超出其压缩框架边界的任务,它仍然会系统性失效——幻觉、逻辑断裂、无法处理新颖场景。对齐可以减轻这些失效的表现,但无法消除它们的根源。

对齐是在一张地图上画得更准确。

治理层决定的是:这张地图是不是应该换掉。

这两件事,不在同一个层级上。

这也是为什么我相信,即使未来对齐技术发展到极致,它也无法替代治理层的功能。它解决的是不同的问题。

七、Agent正在做什么?

另一个被很多讨论忽略的现象:Agent为什么突然火了?

2025年到2026年,AI领域最显著的变化之一,就是"Agent"从学术概念变成了主流产品形态。

不是因为Agent比LLM更聪明——大多数Agent使用的底层模型和普通LLM没有本质区别。

而是因为Agent正在重新建立结构。

Planner → Executor → Memory → Reflection → Tool → Environment

这些东西在人脑里本来就是分开的。你有计划能力,有执行能力,有短期和长期记忆,有自我反思的习惯,有使用工具的经验,有适应环境的本能。

LLM把它们全部揉进了参数。

Agent开始重新拆开。

Agent做的事情,就是重新恢复认知分层:

Planner对应"目标层"——它决定接下来要做什么,而不是直接生成文本。

Memory对应"经验层"——它存储过去的交互历史,而不是让所有上下文都挤在窗口里。

Reflection对应"审计层"——它定期回顾自己的表现,评估哪些策略有效、哪些无效。

Tool对应"执行层"——它调用外部API来获取信息或执行操作,而不是靠参数内部的知识去"猜测"。

所以很多人觉得Agent越来越像人,不是因为模型升级,而是知识重新有了结构。

今天AI工程的发展,并不是不断扩大模型。

而是在模型外部,重新长出模型内部缺失的器官。

如果未来继续发展——Planner还能管理Planner,Reflection还能评价Reflection——最后自然会出现一个认知治理层(Cognitive Governance Layer)。

Agent不是AGI,但Agent可能正在搭建AGI需要的结构。

八、AGI可能需要一个"认知治理层"

这是本文的核心猜测。

未来的AGI,可能需要的不是一个更大的模型,而是在模型之上增加一层能够监控和治理优化过程的系统。

它不是一个更聪明的执行者。它的职能完全不同:

执行层回答:"接下来怎么做?"

治理层回答:"我们正在做的事情,是否仍然值得继续?"

治理层的功能是:

持续监测"模型与现实"之间的偏差是否正在结构性积累;

判断这个偏差是普通误差,还是当前框架本身失效的信号;

在信号足够强时,触发"停止当前优化,评估是否换地图"的决策。

更重要的是:治理层必须拥有执行层没有的信息来源。

治理层不能仅仅依赖模型内部的推理——它必须拥有来自现实世界的独立反馈通道。

这就是剩余的真正价值——它不是缺陷,而是系统保持与现实连接的唯一通道。

九、关于"AI制造AI"的冷静观察

关于AGI,有一种常见预测:一旦AI能够制造更好的AI,形成递归循环,智能增长就会爆炸。

从这个框架看,事情没那么简单。

递归自我改进,是在一个给定的评价体系内,搜索更好的配置。 每一次递归,系统都在同一个"好"的方向上越走越远。

但它从未问过:"好"的定义本身是否正确?

没有治理层的递归自我改进系统,只是一个越来越强的优化器,在错误的方向上加速奔跑。

十、谁来判断"判断者"?

一个无法回避的问题:如果治理层本身也会出错,谁来监督它?

答案是: 递归终止于现实世界。

任何智能系统的最终判据,都不是内部逻辑的自洽性,而是系统与现实交互的结果。

没有上帝视角。只有通过与世界的持续碰撞来校准自己。

结语:一个没有人回答的开放问题

地图永远不等于领土。

但真正重要的问题不是"地图不等于领土",而是:

什么时候应该停止用这张地图,换一张新的?

顺着这条逻辑一直追问下去,会留下一个更大的问题:

如果一个模型已经学会了世界上的全部知识,

它是否仍然需要重新建立认知层级?

还是说,AGI真正需要学习的,

已经不是新的知识,

而是如何组织已有知识?

再往前走一步:

智能到底来自知识,还是来自组织知识的方法?

如果拥有全部知识并不能产生AGI,那么AGI真正增加的,究竟是什么?

AGI缺少的不是更大的模型。

而是知道自己什么时候该停下来、重新判断方向的能力。

真正的智能,不只是优化地图。

而是知道什么时候该换地图。

也许未来AGI真正的突破,不是让机器拥有更大的模型。

而是让机器第一次拥有面对自身局限的能力。

 


浏览(108) (0) 评论(0)
发表评论
我的名片
张晋中
注册日期: 2024-12-16
访问总量: 59,647 次
点击查看我的个人资料
Calendar
最新发布
· AGI还缺少什么?
· 地图永远不等于领土:有限认知、
· 世界与模型之间:压缩、发明与不
· 太极、阴阳、五行、八卦:它们如
· 世界与模型之间:认知的压缩与
· 可控核聚变?还是算了吧
· 价值坍缩:AI时代的社会、财富与
分类目录
【科技进展观察】
· AGI还缺少什么?
· 地图永远不等于领土:有限认知、
· 世界与模型之间:压缩、发明与不
· 太极、阴阳、五行、八卦:它们如
· 世界与模型之间:认知的压缩与
· 可控核聚变?还是算了吧
· 价值坍缩:AI时代的社会、财富与
· 缘起之心,硅基之脑:古老洞见对
· 从预测加工看禅宗公案:现代科学
· 当AI学会像康德那样看世界:先验
存档目录
2026-07-04 - 2026-07-16
2026-04-04 - 2026-04-17
2026-03-08 - 2026-03-22
2026-02-01 - 2026-02-25
2026-01-29 - 2026-01-31
2025-09-02 - 2025-09-02
2025-08-02 - 2025-08-31
2025-07-24 - 2025-07-31
2025-06-10 - 2025-06-24
2025-03-04 - 2025-03-04
2025-02-19 - 2025-02-19
2025-01-03 - 2025-01-30
2024-12-16 - 2024-12-16
 
关于本站 | 广告服务 | 联系我们 | 招聘信息 | 网站导航 | 隐私保护
Copyright (C) 1998-2026. Creaders.NET. All Rights Reserved.