LLM 让我们重新思考的三件事
大型语言模型正在促使人们重新审视关于智能的长期观念,从图灵测试和中文房间,到乔姆斯基的普遍语法与“刺激贫乏”问题。评论者在权衡:LLM 流畅的语言使用和涌现能力,究竟意味着真正的理解,还是仅仅是强大的统计模式匹配,以及这对研究人类认知与构建有用机器分别意味着什么。帖子也探讨了当前局限——逻辑一致性、能动性、自我意识、对数据的依赖——以及继续扩大规模和采用新的训练方法,是否最终能带来接近人工通用智能的东西。
图灵测试、AGI 和 Scaling
- 一些评论认为,经典图灵测试对于“通用智能”来说是必要但不充分的;当前的 LLM 在持续追问下仍会在几分钟内露出破绽。
- 也有人指出,现代系统是有意被限制为不完全模仿人类,因此测试结果很难解释。
- 有人对早期关于所需记忆量以及类人对话时间表的预测印象深刻,认为这些预测只差了几个数量级。
- 关于“登月梯子”式比喻的讨论:早先认为统计方法永远不可能达到通用智能的说法,如今看起来没那么站得住脚;有些人认为,简单的规模化方法也许能走得相当远。
中文房间、翻译与“理解”
- 一种观点认为中文房间思想实验思路有误:如果一个系统能把翻译做得足以骗过母语者,那在操作层面上就等同于理解。
- 另一些人说,LLM 改变了他们的看法:它们展示了强大的翻译能力,却不具有人类式语义。
- 一个反复出现的论点是:即使内部某个组件不理解,整个“房间”(系统)也可以理解,类似于神经元与大脑的关系。
- 有些人认为这些争论是在分散注意力,偏离了实际影响;经济价值并不依赖于对“理解”的理论有一个定论。
普遍语法与人类语言学习
- 争论焦点在于,成功的统计型 LLM 是否削弱了“语言学习需要内建普遍语法”的主张。
- 批评者认为:如果一台机器能在没有这种模块的情况下学习自然语言,这就削弱了强普遍性主张,或者至少让它不再那么排他。
- 支持者回应说:当前模型并不能告诉我们儿童如何从稀疏数据中学习;它们还能学会人类无法学会的“语言”,因此对人类生物学来说并不是很好的证据。
- 对于计算工作是否能有意义地证伪语言学理论,还是大体上与之无关,存在分歧。
思维、理解与错误的本质
- 一些发帖者表示,LLM 流畅的推理迫使人们重新思考“思考”到底是什么,尤其当系统在论证或代码方面超过许多人类时。
- 另一些人坚持认为,频繁的逻辑矛盾和怪异失败表明它并没有真正的理解;他们把把“理解”重新定义为包含 LLM 看作是在改变门槛。
- 反驳意见指出,人类也会自相矛盾并持有错误信念;只盯着失败会使评估产生偏差。
- 对于“理解”是否必须像人类一样,或者最好把它看作一种行为/功能属性,目前没有共识。
能力、局限与能动性
- 评论者列举了 LLM 仍落后于普通人的领域:需要长时间、丰富上下文的任务;稳健的能动性和规划;稳定地自我监控自身局限;不带陈词滥调的创意写作;以及可靠的逻辑反转。
- 也有人回应说,许多日常人类同样依赖套话并会犯推理错误;他们认为当前缺陷是工程上的空白,而不是原则性的极限。
- 有些人把 LLM 看作强大但狭窄的序列建模器,偶然获得了许多认知技能;要获得更像代理的行为,需要更好的预训练目标和控制架构。
- 还有人担心,无论 LLM 是否能教会我们人类认知,它们都已经可以取代“低级认知劳动”。
对科学、语言学与社会的影响
- 一派认为,统计模型就像潜艇与鱼类一样,可能是变革性的技术,但对底层的人类机制揭示不多。
- 另一派认为,构建这类系统本身已经在约束语言与认知理论,因为它表明一些被认为必需的前提并非绝对必要。
- 有些人担心,LLM 的进展会降低人们对传统语言学/认知科学的兴趣,因为实用 AI 的进步可能不需要更深层的理论理解也能继续。
- 也有人强调可扩展性:即使不是完全类人的系统,只要能以低成本复制,也可能主导特定问题领域,并在社会层面产生变革性影响。