核心导读:大语言模型(LLM)狂飙突进,医学考试、司法考卷纷纷被攻陷,看似通用人工智能(AGI)触手可及。然而,Keras 创始人 François Chollet 却尖锐指出:当前的繁荣建立在海量记忆而非真正智能之上,大模型实则是通往 AGI 的歧路。 为打破这一幻觉,他设立了 100 万美元 ARC Prize 竞赛,试图将 AI 研发从“死记硬背”拽回“认知推理”的真正航道。
💬 一句话金句:“智能不是你早已知道答案时的对答如流,而是当你身处完全陌生、不知所措的境地时,所展现出的适应与学习能力。”
📌 核心观点与要点深度拆解
1. 评测幻象与“数据污染”:大模型不过是超大规模的记忆检索机
当前科技巨头习惯用人类专业考试(如美国律师资格考、MCAT、MMLU)来标榜大模型的“通用智能火花”。但这种评估机制存在致命缺陷:数据污染(Data Contamination)。 * 底层机制:LLM 依靠吞噬互联网数十万亿 Token 训练而成,评测题目或极其相似的变体极可能早已被模型“背”了下来。 * 事实印证:多项独立研究表明,一旦将考题语序微调、改变无关变量,或使用训练数据截止日之后生成的全新逻辑题,主流大模型的准确率便会出现断崖式下跌。它展示的并非人类级别的推演能力,而是高维统计概率下的记忆复述(Regurgitation)。
2. 真正的智能:皮亚杰式的“未知境遇下的技能获取效率”
François Chollet 援引发展心理学奠基人让·皮亚杰(Jean Piaget)的核心洞见:“智能,是你不知道该做什么时所使用的能力。” * 重新定义 AGI:智能的本质不是拥有多少静态知识存量,而是面对未知环境时的“技能获取效率”(Skill-Acquisition Efficiency)——即能否在极少先验样本下,快速抽象规则、即兴发挥并解决前所未见的问题。 * 图灵测试与基准崩塌:早在 2014 年聊天机器人 Eugene Goostman 通过扮演“插科打诨的 13 岁男孩”骗过裁判时,图灵测试就已事实性失效;如今仅靠模仿人类语调和统计连词的生成式对话,更无法作为度量 AGI 的标尺。
3. ARC 基准测试:用极简网格测验撕下“巨无霸参数”的遮羞布
针对记忆作弊问题,Chollet 提出了抽象与推理语料库(Abstraction and Reasoning Corpus, ARC)。 * 极简而残酷的设计:ARC 灵感源自 1938 年的瑞文标准推理测验(Raven's Progressive Matrices)。题目仅由 1×1 到 30×30、填充最多 10 种颜色的网格矩阵组成。系统必须仅凭 1~2 个示例,推导出潜在的几何变换规律并输出目标图形。 * 悬殊的成绩对比:普通人类在 ARC 上的解题准确率通常达 84%;而动辄上千亿参数、耗资数亿美元训练的最顶尖 LLM,最初得分仅为 20%,历经数年刷榜目前也仅徘徊在 30%~40% 左右。面对真正需要归纳跃迁与空间逻辑的全新任务,纯自回归模型几乎束手无策。
4. 算力挤占与资本狂热:LLM 热潮或将 AGI 真正进程推迟了 5 到 10 年
不仅 Chollet 提出预警,Meta 首席 AI 科学家 Yann LeCun 也直言“LLM 是通向人类级智能的分岔路与死胡同”,OpenAI CEO Sam Altman 亦公开承认“仅靠堆叠算力缩放模型(Scaling Law)无法实现 AGI”。 * 抽干整个行业的氧气:生成式 AI 狂揽了全球近半数的风险投资与研发算力,导致学术界和工业界陷入了“规模即一切”的同质化内卷。 * 前沿探索被封锁:封闭的研究生态和商业炒作,掩盖了包括主动推理(Active Inference)、领域特定语言程序合成(DSL Program Synthesis)、离散程序搜索(Discrete Program Search)等更接近认知本质方向的探索空间。
🚀 实践应用与行动指南
针对技术管理者、AI 从业者与企业决策者,脱离大模型狂热、建立务实认知落地体系的 3 条行动建议:
1. 警惕“基准刷榜”,重构业务场景的“动态盲测评测集”
- 决策避坑:坚决不要仅依赖公开发布的 MMLU、GSM8K 等主流榜单来选型商业模型;这些公开测试集几乎已被主流开源/闭源模型全量污染。
- 落地动作:构建企业内部的动态沙盒测试集。引入业务特有的私有规则变体、合成对抗样本、颠倒因果逻辑的逻辑陷阱题,评估模型在“完全未见过的前置条件”下的推理鲁棒性,而非单纯看回答是否流畅。
2. 区分“知识库检索”与“推理决策”系统架构
- 方法论建议:在工程架构上,不要把大模型当作“全能推理引擎”来使用。
- 落地动作:
- 记忆与检索归大模型:利用 LLM 强大的感知与自然语言表征能力,负责意图识别、总结归纳与向量检索;
- 逻辑与状态迁移归符号系统/专用算法:在涉及精准逻辑约束、复杂业务排程、确定性决策的环节,引入程序合成、规则约束(Symbolic AI)、运筹优化算法或树状搜索(Tree Search),采用“神经+符号”混合架构,避免纯端到端模型的幻觉陷阱。
3. 研发资源配置建立“双轨制”,避免押注单一的 Scale-up 路径
- 团队决策建议:避免将 100% 的团队精力投入在 Prompt 工程调优或无脑微调千亿参数大模型上。
- 落地动作:设定 80/20 创新边界。80% 资源利用现有成熟基座模型解决商业化即时变现;预留 20% 精力密切跟踪轻量级推理架构、小样本少样本归纳学习、代码引导的自主求解等新范式,为下一代非 Transformer 路径的技术突变预留敏捷反应能力。
💡 终局思考与核心启示
技术的历史反复向我们证明:飞得最高的风筝,并不会演变成宇宙飞船。
大语言模型为人类创造了一个史无前例的“全球知识与语言模式的高精度透镜”,它极大地提高了人类生产力与信息压缩效率,但这终究只是人类既有经验的高阶镜面反射。
人类心智最璀璨的特质,是凭借零星的观察线索,在无垠未知的荒原上凭空抽象出物理定律与数学公理。如果我们把“背诵整个图书馆的鹦鹉”误认为是“发明新科学的爱因斯坦”,并以此为终极信仰投入所有资源,我们可能恰恰筑起了阻碍 AGI 诞生的最高围墙。
走出“规模即智能”的盲从,重新回到认知的原点思考“学习与抽象的最小机制”——这不仅是百万美元 ARC Prize 的倡议,也是每一位硬核创新者必须保持的清醒。