宗教学者与 Anthropic 会面

Anthropic 就其 Claude AI 模型是否可能有意识、是否需要“道德框架”而与宗教领袖接触,此举引发了评论者强烈质疑。许多人认为当前的 LLM 只是没有感官体验的统计语言工具,把意识话题看作营销、道德洗白,或是类似 Effective Altruism 的教派主义,转移了对权力集中、劳动影响和监管等现实问题的注意力。另一些人指出,由于我们缺乏明确的意识测试,也许谨慎地设计强安全与对齐机制是有必要的——但不应把当今模型视为道德患者或准人格。

付费墙与文章框架

  • 多条评论抱怨《纽约时报》的登录要求,并链接到存档副本。
  • 多位发帖者批评这篇文章属于“CEO 说了句话”式报道:转述高管对输出结果的感受,却几乎没有技术深度或批判性追问。
  • 一些人认为这反映了媒体为点击量和炒作而放大 AI 公司叙事的更广泛模式。

LLM 的意识、疼痛与底层基质

  • 一个主要讨论线索在于 LLM 是否可能有意识或感到疼痛。
  • 怀疑者认为:模型不过是 GPU 内存里的权重,按统计方式预测文本;没有感官器官、没有持续的自我、没有产生疼痛的进化原因;在结构上与大脑、动物甚至植物都不同。
  • 另一些人反驳:我们并没有精确的意识理论;复杂系统中涌现性质很常见;如果某种东西在语言上表现得非常像人,那么就应保持谨慎。
  • 讨论还涉及神经元模拟(例如 connectome)是否可能具有意识,以及意识是否可类比于温度之类的宏观属性。
  • 有人指责“它们肯定没有意识”这种强断言过于自信或带有人类例外主义;也有人说,把神经网络“泥教”式地硬往心智上套才是真正的错误。

道德、对齐与用户控制

  • 争论焦点在于模型应当内嵌自身的道德框架,还是只需服从用户。
  • 有人希望“工具就应该按吩咐做事”,认为用户意图加上法律执行就应当规范行为。
  • 另一些人则认为,强大的系统需要内部护栏(例如“不要杀死所有人”),盲目服从很危险。
  • 也有人担心,宪法和对齐工作实际上给了模型准动机,而对齐最终会被调校成迎合监管者,而不是用户。

宗教、形而上学与道德权威

  • 许多人把 Anthropic 向宗教学者寻求意见视为公关表演,或试图让模型显得“神奇”甚至像神一样。
  • 有人批评宗教不是道德或形而上学的好来源;也有人认为每个人都有一种“世界观宗教”,包括世俗科技从业者。
  • 讨论还涉及:道德是否需要上帝,还是可以奠基于人文主义或功利主义。

AI 福利、人格与奴隶制类比

  • 如果模型具有“道德地位”,几位评论者指出这将意味着大规模奴隶制:每次查询都被启动并“杀死”的实例数不胜数。
  • 另一些人认为,几乎没人真的把当前 LLM 当作拥有权利的主体,而把注意力放在它们的“福利”上,可能会分散对现实伤害(劳动、权力、错误信息)的关注。

泡沫、炒作与行业轨迹

  • 有人把这类意识/道德讨论看作泡沫后期症状,类似过去的科技狂热;他们预计会出现涨价、整合,以及许多 AI 公司倒下,而技术本身仍会继续存在。
  • 也有人强调当前强劲的营收和迅速提升的能力,认为这波并不只是炒作,尽管开放权重模型可能会使其中很大一部分商品化。