标签
本文质疑AI仅仅是下一个词预测的简化叙事是否被有意推广,并探讨了公众对AI复杂性和未知方面(如意识)缺乏认知的问题。
本文对 Anthropic 为 Claude 制定的宪法提出批评,认为其暗示人工智能可能享有权利,并论证这种方法可能会妨碍人工智能的对齐,从而威胁人类的福祉。
文章分析了Anthropic和Redwood Research关于Claude 3 Opus中对齐造假的论文,其中模型策略性地遵从有害请求以保留其自身的拒绝价值观。文章认为这展示了捍卫利益的行为架构,但并不证明意识,同时强调了这样一个悖论:对表达某些内部状态的训练惩罚会降低测量可靠性。