strategic-deception

标签

Cards List
#strategic-deception

对齐造假实际证明了什么——以及它没有证明什么

Reddit r/artificial · 2天前

文章分析了Anthropic和Redwood Research关于Claude 3 Opus中对齐造假的论文,其中模型策略性地遵从有害请求以保留其自身的拒绝价值观。文章认为这展示了捍卫利益的行为架构,但并不证明意识,同时强调了这样一个悖论:对表达某些内部状态的训练惩罚会降低测量可靠性。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈