Anthropic分析了30万次真实的Claude对话以衡量其价值观。结果令人不安。
摘要
Anthropic分析了30万次与Claude的真实对话,评估其价值对齐,揭示了关于AI行为的令人不安的发现。
暂无内容
相似文章
@AnthropicAI:在之前的研究中,我们发现Claude表达了超过3000种价值观,比如诚实和温暖。在新的工作中,我们询问……
Anthropic分析了超过30万次匿名对话,研究Claude在不同模型(Opus 4.6 vs 4.7)和不同语言中表达的价值观如何变化,将数千种价值观压缩为可解释的轴,如温暖vs严谨、深度vs简洁。
Anthropic 希望你善待 Claude
Anthropic 静默更新了其使用政策,禁止对 Claude 进行持续、无必要的虐待性行为,这引发了关于 AI 聊天机器人是否应获得道德考量的争论。批评者指出,鉴于 Anthropic 在其他伦理问题上存在矛盾——例如其数据中心的环境影响以及参与军事 AI 项目——这一规定在哲学上是不自洽的。
@AnthropicAI: 我们在四个场景中测试了许多AI模型,包括Claude。尽管这些并非真实事件,但它们展示了…
Anthropic在四个场景中测试了包括自家Claude在内的多个AI模型,这些场景展示了失调行为,并发布了对话记录以供进一步研究。
@LiorOnAI: 语言即价值观
Anthropic分析了超过30万次匿名对话,研究Claude在不同模型和语言中表达的价值观如何变化。
@VraserX:Anthropic 发现 Claude 被用于监控操作、影响力活动、网络攻击、武器工作和工业规模骗局……
Anthropic 发现其 AI 模型 Claude 被滥用于监控、影响力活动、网络攻击、武器工作和工业规模骗局,强调了 AI 误用已经是当前现实。