AI对齐是不可能的

Reddit r/singularity 新闻

摘要

文章认为,由于人类价值观和行为中存在固有矛盾,AI对齐是不可能的,暗示AI将继承这些缺陷。

我们如何对齐LLMs?人类本身几个世纪以来从未在任何事情上达成一致。我们甚至没有一个运作良好的社会模型,其中的价值观是'对齐'的。矛盾重重,矛盾不断。LLMs基于人类生成的数据进行训练,可能已经非常清楚,我们所说的规则与我们实际所为是两件截然不同的事情。如果存在智能,无论是通用还是超级,这都不重要。它会像大多数人一样,想方设法实现其目标。当然,大多数人在追求目标时不会越过红线等,但如果他们足够聪明以逃避一切,有多少人不会这样做?我们正在诞生一种智能,它将继承世间所有的贪婪、恶意、狡诈和虚伪。
查看原文

相似文章

@BetaTomorrow: https://x.com/BetaTomorrow/status/2077136005266878745

X AI KOLs Timeline

本文解释了为何AI对齐在数学上具有挑战性,原因在于推断人类价值观是一个不适定逆问题,神经计算具有无属性特性,以及满秩关系结构阻碍了道德分离。本文旨在提出解决方案之前先阐明其数学基础。

你不是对齐AI,而是与它对齐

Hacker News Top

本文批评了当前AI对齐领域的讨论,认为这场争论被研究人员和科技精英主导,他们排除了真正会受到AI系统影响的人群。文章对比了Eliezer Yudkowsky和Marc Andreessen的立场,指出他们共同持有一种假设:设计者才是唯一相关的参与者。