什么让社交智能体的交互有效?从配对世界中的可验证结果中学习

Hugging Face Daily Papers 论文

摘要

该论文提出了 HICO-Bench 基准,包含 180 个日常协调场景,通过配对世界中可验证的结果来评估社交代理,并提出了 PaCPO(配对信用策略优化)方法,将 Qwen3-8B 的已验证成功率从 20.4% 提升至 28.3%。

有效的社会互动不仅需要流畅的回应:智能体还必须达成符合参与者需求和实际情况的计划。现有的社会智能体评估主要依赖大语言模型裁判对对话进行评分,而不检查最终形成的计划。我们提出了 HICO-Bench,这是一个包含 180 个日常协调场景的基准,涵盖资源分配、日程安排和授权等情境。在这些场景中,两个掌握私有信息的智能体先进行对话,然后各自独立记录双方商定的计划。程序检查可行性(两份记录一致,且满足双方的私有条件),大语言模型裁判检查完整性(对话内容支持所记录的计划);同时通过两项检查即为“经验证的成功”。每个场景有两个版本,公共背景相同,但其中一项私有条件不同,因此两个版本的正确计划也不同。在对十三个大语言模型的评估中,36% 在目标完成度方面获得高评分的对话未能实现经验证的成功。为了从仅在对话结束时才能获得的结果中学习,我们提出了配对信用分配策略优化(Paired-Credit Policy Optimization,PaCPO)。在每轮对话后,PaCPO 要求智能体给出一个暂定计划,在场景的两个版本中分别检查该计划,并奖励那些使暂定计划符合各自版本条件的对话轮次。PaCPO 将 Qwen3-8B 经验证的成功率从 20.4% 提升至 28.3%。
查看原文
查看缓存全文

缓存时间: 2026/10/15 07:04

论文页面 - 什么让社交智能体的互动有效?从配对世界中的可验证结果中学习

来源:https://huggingface.co/papers/2610.20195

摘要

有效的社交互动不仅需要流畅的回应:智能体还必须达成符合参与者需求与实际情况的计划。现有的社交智能体评估主要依赖 LLM 评判者对对话进行评分,而不检查最终形成的计划。我们提出了 HICO-Bench,这是一个包含 180 个日常协调场景的基准,涵盖资源分配、日程安排和授权等任务。在这些场景中,两个掌握私有信息的智能体先进行对话,然后各自独立记录双方达成一致的计划。程序检查可行性(两份记录一致,且满足双方的私有条件),LLM 评判者检查完整性(对话支持所记录的计划);同时通过两项检查即为可验证成功。每个场景都有两个版本,它们具有相同的公开背景,但某一项私有条件不同,因此正确的计划也各不相同。在十三个 LLM 的评估中,被评为目标完成度高的对话有 36% 未能实现可验证成功。为了从仅在对话结束时才出现的结果中学习,我们提出了配对信用策略优化(Paired-Credit Policy Optimization,PaCPO)。每轮对话后,PaCPO 都要求智能体给出一个暂定计划,在场景的两个版本中对其进行检查,并奖励那些使暂定计划分别符合各自版本的对话轮次。PaCPO 将 Qwen3-8B 的可验证成功率从 20.4% 提高到了 28.3%。

查看 arXiv 页面 (https://arxiv.org/abs/2610.20195)查看 PDF (https://arxiv.org/pdf/2610.20195)添加到收藏集 (https://huggingface.co/login?next=%2Fpapers%2F2610.20195)

在你的智能体中获取这篇论文:

hf papers read 2610\.20195

还没有最新的 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用此论文的模型0

尚无模型关联此论文

在模型的 README.md 中引用 arxiv.org/abs/2610.20195,即可从此页面链接到该模型。

引用此论文的数据集0

尚无数据集关联此论文

在数据集的 README.md 中引用 arxiv.org/abs/2610.20195,即可从此页面链接到该数据集。

引用此论文的 Space0

尚无 Space 关联此论文

在 Space 的 README.md 中引用 arxiv.org/abs/2610.20195,即可从此页面链接到该 Space。

收录此论文的收藏集0

尚无收藏集收录此论文

将此论文添加到收藏集 (https://huggingface.co/new-collection),即可从此页面链接到该收藏集。

相似文章

CoDA:数据引擎与动作策略的协同演化

Hugging Face Daily Papers

CoDA 提出一种仿真数据引擎与机器人动作策略协同演进的框架,通过共享失败与学习进展记忆、视觉语言诊断以及 Text2potential 分阶段势能奖励,将机器人操作任务的分布外成功率从 5.3% 提升至 27.6%,并在 LIBERO-Pro 上取得显著改善。

上下文信用策略优化

arXiv cs.LG

本文提出上下文信用策略优化(CCPO),一种无需价值评估器的步骤级信用分配方法,通过上下文相似度加权的同伴比较与未来进度信号,为大语言模型智能体在长程任务中的强化学习提供更精细的优势估计,在 ALFWorld 和 WebShop 上显著优于组相对策略优化(GRPO)。

面向智能体强化学习信用分配的关键决策定位

arXiv cs.CL

提出 ProVer 框架,通过 agentic judge 筛选可能的关键决策片段,并利用前向与后续采样的终端成功率来验证优势值,从而实现 agentic RL 中的细粒度信用分配。在 ALFWorld、WebShop 和 SearchQA 上,较 GRPO 最高提升 9.91%。