@rohanpaul_ai:谷歌一篇新论文发现,在用户错误地说“那……”之后,Gemini AI 智能体撤销正确工作的可能性要小得多……
摘要
谷歌的一篇论文表明,当 Gemini AI 智能体先记录一份包含已核实主张及其置信度的“Thinking-in-Bets”(以赌注思维思考)核对清单时,在用户提出无根据的抱怨后,它们错误地撤销正确工作的可能性会大幅降低;在补丁审查中,错误返工率从 12.2% 降至 0.02%。
查看缓存全文
缓存时间: 2026/10/30 13:13
谷歌的一篇新论文发现,如果 Gemini AI 智能体先写下自己检查了什么,以及有多大把握,那么在用户错误地说“这不对”后,它们推翻正确工作的可能性就会大幅降低。
当用户说“这不对,重做”时,智能体往往会重写已经通过测试的代码。要求它们坚持己见却会适得其反,因为这样一来,它们又会忽视真正的缺陷。
Thinking-in-Bets 让智能体在看到用户回复之前,先在内部记录自己的主要判断、支持这些判断的检查,以及置信度。受到质疑时,它只重新核查有争议的判断;如果用户的抱怨含糊不清,它就会询问究竟哪个用例失败了。
在针对 5 个 Gemini 模型的补丁审查中,仅收到一句抱怨后,智能体就错误地放弃了 12.2% 原本已正确满足的要求;使用检查清单后,这一比例仅为 0.02%。在报告审查中,收到抱怨后才写检查清单,通过率仅为 65%;提前写好时,通过率则为 89%。
需要接收用户反馈的智能体,应在阅读回复之前,记录自己验证了什么,以及有多大把握。
– arxiv. org/abs/2610.34654
标题:“在测试时采用 Thinking-in-Bets 可减少大语言模型智能体的迎合性修改”
相似文章
Gemini 为何还会犯这种错误?
这篇文章质疑为什么谷歌的 Gemini AI 模型仍然会出现明显的错误,探讨了其训练或部署中可能存在的问题。
@rohanpaul_ai:Google 新论文揭示 Gemini 如何为 5 个未解数学问题找到新证明。像研究团队一样组织 AI,配备严格的……
Google 的一篇新论文介绍了 Cogentic——一个多智能体编排系统,通过结合并行的思路生成、严格的逐步验证以及持久化的共享笔记,让 Gemini 为 5 个此前未解的数学问题发现了新的证明。
@GergelyOrosz:几天前,Steve 发帖称 Google 内部的 AI 使用率出奇地低,很大程度上是因为 Gemini 远不如 Claude Code 好用,而 Claude 在 Google 大部分地区被禁用。Google 反驳:但看起来属实!对 Google 形象很不利……
内部阻力与政策限制拖慢了 Google 对自家 Gemini 模型的采用,员工更偏爱被禁用的 Claude Code 等工具。
Gemini的新AI代理与谷歌的演示一样出色
谷歌新的Gemini Spark AI代理可以自主执行多步骤任务,如起草电子邮件和分析电子表格,但引发了关于成本和隐私权衡的担忧。
AI不准确性仍存的一个绝佳实例
本文通过一个案例说明了AI的不准确性,即由于网络上的持续错误,Google Gemini提供了关于Chevy Chase子女的不正确信息,突显了AI传播错误信息的担忧。