【新智元导读】图灵奖得主LeCun与Meta分道扬镳★ღღ★！LLM邪路一条★ღღ★，「世界模型才是」未来★ღღ★。

　　据多家权威媒体报道★ღღ★，Meta首席AI科学家★ღღ★、负责「基础AI研究」（FAIR）的Yann LeCun★ღღ★，预计将很快离职★ღღ★。

　　这位65岁的AI界元老亚美体育官方地址★ღღ★，在Meta这家全球最大的科技公司之一担任核心大脑★ღღ★，可以说拥有无限的资源和朋友夫妻一起租房住★ღღ★。

　　今年夏天★ღღ★，年仅28岁的Alexandr Wang成为Meta的首席AI官★ღღ★，让这位初出茅庐的大语言模型狂热者成了LeCun的上司亚美体育官方地址★ღღ★。

　　此外亚美体育官方地址★ღღ★，Meta今年还任命了另一位相对年轻的首席科学家赵晟佳（Shengjia Zhao）★ღღ★，职位也在LeCun之上★ღღ★。

　　在官方公告中★ღღ★，Meta盛赞了赵晟佳在scaling方面带来的「突破」★ღღ★。而LeCun恰恰对scaling失去了信心★ღღ★。

　　如果你好奇为什么LeCun和Zhao都是首席科学家★ღღ★，那是因为Meta的AI部门组织架构相当奇特★ღღ★，分成了多个独立的团队★ღღ★。

　　上个月★ღღ★，Meta超级AI实验室裁掉了数百人★ღღ★，包括10年老将田渊栋★ღღ★。据称★ღღ★，这是为了理顺这种混乱的局面和朋友夫妻一起租房住★ღღ★。

　　而那支曾由LeCun领导★ღღ★、风头一时无两的FAIR★ღღ★，如今早已风光不再★ღღ★。据现任与前员工透露★ღღ★，这个部门经历了裁员★ღღ★、预算缩水★ღღ★，内部影响力也明显下降★ღღ★。

　　曾几何时★ღღ★，FAIR是Meta内部思想最活跃的「象牙塔」★ღღ★，研究人员可以探讨各种AI未来路径★ღღ★，甚至可以做些「未必能成」的实验★ღღ★，完全不用担心产品化问题★ღღ★。

　　而现在★ღღ★，Meta新组建的AI研究部门招来一大批高薪新兵★ღღ★，由Wang主导★ღღ★，目标明确★ღღ★：要快★ღღ★、要落地★ღღ★、要产品化★ღღ★。

　　他曾在多伦多的Geoffrey Hinton实验室工作亚美体育官方地址★ღღ★，那时Hinton还没成为AI传奇人物★ღღ★。

　　「最让我兴奋的事情★ღღ★，就是和比我聪明的人共事★ღღ★，因为这会放大你的能力★ღღ★。」LeCun在2023年杂志采访时说道和朋友夫妻一起租房住★ღღ★。

　　在贝尔实验室★ღღ★，LeCun曾参与开发手写识别技术★ღღ★，这项技术后来被广泛应用于银行自动读取支票★ღღ★。他还参与了一个项目亚美体育官方地址★ღღ★，致力于将纸质文档数字化并通过互联网分发★ღღ★。

　　LeCun曾表示★ღღ★，自己从小就对物理感兴趣★ღღ★，在贝尔实验室期间也主要和物理学家合作★ღღ★，看了不少物理教材★ღღ★。

　　我学到了很多表面上与AI或计算机科学无关的东西（我本科是电气工程★ღღ★，计算机方面的正规训练其实很少）★ღღ★。

　　2013年★ღღ★，扎克伯格亲自邀请他加入Facebook（当时还未更名为Meta）★ღღ★，组建全新的AI实验室★ღღ★。

　　他领导这个团队四年★ღღ★，2018年卸任★ღღ★，转为公司首席AI科学家★ღღ★，以「个人研究员」身份继续探索技术前沿★ღღ★。

　　2018年★ღღ★，他与Geoffrey Hinton和Yoshua Bengio共同获得图灵奖——计算机界的最高荣誉★ღღ★，以表彰三人在神经网络方面的奠基性工作★ღღ★。

　　自那之后★ღღ★，LeCun就逐渐转为「象征性人物」角色★ღღ★。他没有参与Meta首个开源大语言模型Llama的研发★ღღ★，也早就不再参与这类项目的日常工作★ღღ★。

　　据与他共事的人透露★ღღ★，LeCun现在主要在做自己的研究项目★ღღ★，也经常出席各种技术会议★ღღ★，发表对AI技术的看法★ღღ★。

　　面对媒体的报道★ღღ★，Yann LeCun只是指出了报道中的「小错误」★ღღ★，并没有否认即将离职的消息★ღღ★。

　　他知道自己在包括Meta在内的整个硅谷技术圈内★ღღ★，备受冷落★ღღ★。上个月在MIT的一次研讨会上★ღღ★，65岁的LeCun直言★ღღ★：

　　这些年★ღღ★，我在硅谷★ღღ★、包括Meta的很多角落都不太受欢迎★ღღ★，因为我一直在说★ღღ★，3到5年内★ღღ★，世界模型将成为主流AI架构★ღღ★，没人再会愿意用现在这种LLM★ღღ★。

　　但他坚信自己对AI未来的判断★ღღ★。他的老朋友Léon Bottou曾告诉媒体★ღღ★，LeCun「倔强得可爱」——他会听别人意见★ღღ★，但更有自己坚守的信念亚美体育官方地址★ღღ★。

　　他认为★ღღ★，无论科技巨头如何扩大其规模★ღღ★，我们目前所理解的大语言模型都已是「强弩之末」★ღღ★，是一条「岔路★ღღ★、干扰★ღღ★，一条死胡同」★ღღ★。

　　他为现代AI奠定了诸多基础★ღღ★。而现在他坚信★ღღ★，领域内的大多数人都被大语言模型的「海妖之歌」引入了歧途★ღღ★。

　　所谓「世界模型」★ღღ★，类似小动物或婴儿那样★ღღ★，通过视觉等感知数据主动学习世界规律★ღღ★；而LLM只是依赖海量文本做预测的模型★ღღ★。

　　Meta的Llama★ღღ★、OpenAI的GPT★ღღ★、谷歌的Bard这些模型★ღღ★，都是靠海量数据训练出来的★ღღ★。LeCun估算★ღღ★，如果让人去读完它们训练所需的所有文本★ღღ★，大概得花10万年★ღღ★。

　　我们从与世界的互动中★ღღ★，获取的信息要多得多★ღღ★。LeCun估计★ღღ★，一个普通的四岁小孩接触过的数据量★ღღ★，是目前最大的LLM的50倍★ღღ★。

　　而他自己★ღღ★，早就准备好了替代方案★ღღ★。他称之为「目标驱动的AI」（objective-driven AI）★ღღ★。

　　他认为和朋友夫妻一起租房住★ღღ★，未来和朋友夫妻一起租房住★ღღ★，我们需要与可穿戴设备互动★ღღ★，就像与人交流一样★ღღ★，而大语言模型根本不像人类那样理解世界亚美体育官方地址★ღღ★。

　　这些动物能完成惊人的壮举★ღღ★，它们理解物理世界★ღღ★。任何一只家猫都能规划出极其复杂的行动★ღღ★，因为它们拥有关于世界的因果模型★ღღ★。

　　为了说明这一点★ღღ★，LeCun设计了一个思想实验★ღღ★：「想象一个立方体悬浮在你面前的空中★ღღ★。好★ღღ★，现在让这个立方体绕着垂直轴旋转90度★ღღ★。它会是什么样子？」

　　当然★ღღ★，大语言模型可以毫不费力地写一首关于悬浮旋转立方体的打油诗★ღღ★，但它无法真正帮助你与这个立方体互动★ღღ★。

　　他指出★ღღ★，尽管大语言模型训练所用的文本量需要一个人花45万年才能读完★ღღ★，但一个四岁的孩子在醒着的16000小时里★ღღ★，通过眼睛看★ღღ★、用手触摸★ღღ★，已经处理了高达1.4x10^14字节的关于世界的感觉数据——

　　顺便一提★ღღ★，这些只是LeCun在演讲中给出的估算★ღღ★，他在其他场合也给过不同的数字★ღღ★。但这些数字指向的核心观点是★ღღ★：大语言模型存在着局限★ღღ★，而LeCun相信世界模型能够克服这些局限★ღღ★。

　　在Meta时★ღღ★，LeCun其实已经开始研究世界模型——他还拍了一个介绍视频和朋友夫妻一起租房住★ღღ★，开头就让你想象一个旋转的立方体★ღღ★。

　　在AI行动峰会的演讲中★ღღ★，他理想中的模型包含一个对「当前世界状态的估计」亚美体育官方地址★ღღ★，以某种抽象形式呈现与当前情境相关的一切★ღღ★。它不再是按顺序预测token★ღღ★，而是「预测在你采取一系列行动后★ღღ★，世界将达到的最终状态」和朋友夫妻一起租房住★ღღ★。

　　他表示★ღღ★，世界模型将使未来的计算机科学家能够构建出「可以规划行动——可能是分层级的——以实现某个目标的系统★ღღ★，以及能够进行推理的系统★ღღ★。」

　　LeCun还坚称★ღღ★，这类系统将拥有更强大的安全特性★ღღ★，因为控制它们的方式是内置的★ღღ★，而不是像现在这样★ღღ★，面对一个神秘莫测★ღღ★、只会输出文本的黑箱★ღღ★，只能通过微调来加以修正★ღღ★。

　　他提出★ღღ★，他的世界模型将审视当前的世界状态★ღღ★，并通过寻找高效的解决方案★ღღ★，来寻求与某个不同状态的兼容性★ღღ★。

　　LeCun在演讲中解释道★ღღ★：「你需要一个能量函数来衡量不兼容性★ღღ★，给定一个x★ღღ★，找到一个对于该x能量较低的y」★ღღ★。

　　如果说★ღღ★，我们从LeCun的公开言论中拼凑出的「真相」很粗糙★ღღ★、有些模糊★ღღ★，甚至完全错误★ღღ★，那也完全正常★ღღ★。

　　但这可能需要耗费数年——甚至永远无法实现——更不用说数十亿美元的投资了★ღღ★，才可能看到任何真正了不起的成果★ღღ★。亚美体育亚美★ღღ★。亚美am8★ღღ★，am8亚美体育★ღღ★。