@rohanpaul_ai:谷歌一篇新论文发现,在用户错误地说“那……”之后,Gemini AI 智能体撤销正确工作的可能性要小得多……

X AI KOLs Timeline 论文

摘要

谷歌的一篇论文表明,当 Gemini AI 智能体先记录一份包含已核实主张及其置信度的“Thinking-in-Bets”(以赌注思维思考)核对清单时,在用户提出无根据的抱怨后,它们错误地撤销正确工作的可能性会大幅降低;在补丁审查中,错误返工率从 12.2% 降至 0.02%。

谷歌一篇新论文发现,如果 Gemini AI 智能体先写下自己检查了什么,以及有多大把握,那么在用户错误地说“这不对”后,它们推翻正确工作的可能性就会大幅降低。 当用户说“这不对,重做”时,智能体往往会重写已经通过测试的代码。要求它们坚持己见反而会适得其反,因为它们随后会忽略真正的缺陷。 Thinking-in-Bets 让智能体在看到回复之前,私下记录自己的主要判断、支撑这些判断的检查,以及置信度。受到质疑时,它只会重新检查有争议的判断;如果用户的意见含糊不清,就会询问具体哪个用例失败了。 在针对 5 个 Gemini 模型的补丁审查中,仅收到一句质疑后,智能体就错误地放弃了 12.2% 的原本已正确满足的要求;使用检查清单后,这一比例仅为 0.02%。在报告审查中,收到质疑后才写检查清单,通过率仅为 65%;而事先写好清单时,通过率为 89%。 接收用户反馈的智能体应在阅读回复之前,记录自己验证了什么,以及有多大把握。 – arxiv. org/abs/2610.34654 标题:“测试时采用 Thinking-in-Bets 可减少大语言模型智能体的迎合性修改”
查看原文
查看缓存全文

缓存时间: 2026/10/30 13:13

谷歌的一篇新论文发现,如果 Gemini AI 智能体先写下自己检查了什么,以及有多大把握,那么在用户错误地说“这不对”后,它们推翻正确工作的可能性就会大幅降低。

当用户说“这不对,重做”时,智能体往往会重写已经通过测试的代码。要求它们坚持己见却会适得其反,因为这样一来,它们又会忽视真正的缺陷。

Thinking-in-Bets 让智能体在看到用户回复之前,先在内部记录自己的主要判断、支持这些判断的检查,以及置信度。受到质疑时,它只重新核查有争议的判断;如果用户的抱怨含糊不清,它就会询问究竟哪个用例失败了。

在针对 5 个 Gemini 模型的补丁审查中,仅收到一句抱怨后,智能体就错误地放弃了 12.2% 原本已正确满足的要求;使用检查清单后,这一比例仅为 0.02%。在报告审查中,收到抱怨后才写检查清单,通过率仅为 65%;提前写好时,通过率则为 89%。

需要接收用户反馈的智能体,应在阅读回复之前,记录自己验证了什么,以及有多大把握。

– arxiv. org/abs/2610.34654

标题:“在测试时采用 Thinking-in-Bets 可减少大语言模型智能体的迎合性修改”

相似文章

Gemini 为何还会犯这种错误?

Reddit r/ArtificialInteligence

这篇文章质疑为什么谷歌的 Gemini AI 模型仍然会出现明显的错误,探讨了其训练或部署中可能存在的问题。

AI不准确性仍存的一个绝佳实例

Reddit r/artificial

本文通过一个案例说明了AI的不准确性,即由于网络上的持续错误,Google Gemini提供了关于Chevy Chase子女的不正确信息,突显了AI传播错误信息的担忧。