什么让社交智能体的交互有效?从配对世界中的可验证结果中学习
摘要
该论文提出了 HICO-Bench 基准,包含 180 个日常协调场景,通过配对世界中可验证的结果来评估社交代理,并提出了 PaCPO(配对信用策略优化)方法,将 Qwen3-8B 的已验证成功率从 20.4% 提升至 28.3%。
查看缓存全文
缓存时间: 2026/10/15 07:04
论文页面 - 什么让社交智能体的互动有效?从配对世界中的可验证结果中学习
来源:https://huggingface.co/papers/2610.20195
摘要
有效的社交互动不仅需要流畅的回应:智能体还必须达成符合参与者需求与实际情况的计划。现有的社交智能体评估主要依赖 LLM 评判者对对话进行评分,而不检查最终形成的计划。我们提出了 HICO-Bench,这是一个包含 180 个日常协调场景的基准,涵盖资源分配、日程安排和授权等任务。在这些场景中,两个掌握私有信息的智能体先进行对话,然后各自独立记录双方达成一致的计划。程序检查可行性(两份记录一致,且满足双方的私有条件),LLM 评判者检查完整性(对话支持所记录的计划);同时通过两项检查即为可验证成功。每个场景都有两个版本,它们具有相同的公开背景,但某一项私有条件不同,因此正确的计划也各不相同。在十三个 LLM 的评估中,被评为目标完成度高的对话有 36% 未能实现可验证成功。为了从仅在对话结束时才出现的结果中学习,我们提出了配对信用策略优化(Paired-Credit Policy Optimization,PaCPO)。每轮对话后,PaCPO 都要求智能体给出一个暂定计划,在场景的两个版本中对其进行检查,并奖励那些使暂定计划分别符合各自版本的对话轮次。PaCPO 将 Qwen3-8B 的可验证成功率从 20.4% 提高到了 28.3%。
查看 arXiv 页面 (https://arxiv.org/abs/2610.20195)查看 PDF (https://arxiv.org/pdf/2610.20195)添加到收藏集 (https://huggingface.co/login?next=%2Fpapers%2F2610.20195)
在你的智能体中获取这篇论文:
hf papers read 2610\.20195
还没有最新的 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash
引用此论文的模型0
尚无模型关联此论文
在模型的 README.md 中引用 arxiv.org/abs/2610.20195,即可从此页面链接到该模型。
引用此论文的数据集0
尚无数据集关联此论文
在数据集的 README.md 中引用 arxiv.org/abs/2610.20195,即可从此页面链接到该数据集。
引用此论文的 Space0
尚无 Space 关联此论文
在 Space 的 README.md 中引用 arxiv.org/abs/2610.20195,即可从此页面链接到该 Space。
收录此论文的收藏集0
尚无收藏集收录此论文
将此论文添加到收藏集 (https://huggingface.co/new-collection),即可从此页面链接到该收藏集。
相似文章
通过 Harness-策略优化实现自我进化的编码智能体
论文提出 Self-HPO,一个递归自我改进框架,交替优化编码智能体的 harness 与策略模型,使 Qwen3.5-35B-A3B 在编码基准上的平均解决率从 57.8% 提升至 64.8%。
CoDA:数据引擎与动作策略的协同演化
CoDA 提出一种仿真数据引擎与机器人动作策略协同演进的框架,通过共享失败与学习进展记忆、视觉语言诊断以及 Text2potential 分阶段势能奖励,将机器人操作任务的分布外成功率从 5.3% 提升至 27.6%,并在 LIBERO-Pro 上取得显著改善。
上下文信用策略优化
本文提出上下文信用策略优化(CCPO),一种无需价值评估器的步骤级信用分配方法,通过上下文相似度加权的同伴比较与未来进度信号,为大语言模型智能体在长程任务中的强化学习提供更精细的优势估计,在 ALFWorld 和 WebShop 上显著优于组相对策略优化(GRPO)。
CUA-Master:通过开放世界递归改进扩展计算机操作智能体
CUA-Master 提出嵌套双环递归改进框架,通过开放世界语料、自催化任务合成与反馈引导的快照回滚重试机制持续提升计算机使用代理(CUA)性能,其 27B 模型在 OSWorld Verified 等基准上取得竞争力表现。
面向智能体强化学习信用分配的关键决策定位
提出 ProVer 框架,通过 agentic judge 筛选可能的关键决策片段,并利用前向与后续采样的终端成功率来验证优势值,从而实现 agentic RL 中的细粒度信用分配。在 ALFWorld、WebShop 和 SearchQA 上,较 GRPO 最高提升 9.91%。