多智能体LLMs未能相互探索

Hugging Face Daily Papers 论文

摘要

本文指出当前LLM智能体未能系统地探索同伴,导致协调不佳,并引入MACE,一个轻量级框架,使用上下文赌博机进行有效的同伴选择。

探索对于多智能体系统的可靠自主性至关重要,但目前尚不清楚大语言模型(LLM)智能体在相互交互时能否有效探索。我们发现,现代LLM智能体未能做到这一点,通常表现出短视和两极化的交互模式,导致协调欠佳和遗憾值增加。我们将这一挑战形式化为多智能体探索问题,建模为部分可观测随机博弈(POSG)问题,其中智能体必须试探同伴以推断其能力并识别有效的交互策略。为解决此问题,我们引入了多智能体上下文探索(MACE),一种轻量级框架,通过结构化的同伴选择明确促进探索。在上下文和参数多样性设置中,MACE显著改善了探索行为和下游任务性能。我们进一步从理论上证明,探索的价值随智能体多样性增加而增加。总体而言,我们的结果凸显了当前LLM智能体的根本局限性,并强调了明确引导的探索对于可靠多智能体自主性的重要性。代码将在 https://github.com/deeplearning-wisc/mace 发布。
查看原文
查看缓存全文

缓存时间: 2026/07/15 00:18

论文页面 - 多智能体LLM未能相互探索

来源: https://huggingface.co/papers/2607.11250 1️⃣ 我们发现,当前的大语言模型智能体(包括前沿模型)常常无法系统性地探索同伴。相反,它们过早地固定于少数智能体,产生短视且高度两极化的交互模式。

2️⃣ 为何这很重要?在现实世界的多智能体系统中,不同智能体可能拥有不同的知识、能力与专长领域。要有效协作,智能体必须探索同伴、识别互补优势,并学会在不同情境下与谁互动。缺乏有效探索时,即便每个智能体能力出众,整个系统也可能遭遇协调不力,错失宝贵信息。

3️⃣ 为解决这一问题,我们提出了多智能体上下文探索(MACE),一个轻量级框架,通过基于结构化上下文赌博机的同伴选择机制,帮助智能体发现有效的协作者。

4️⃣ 理论上,MACE实现了次线性遗憾,而非探索策略则导致线性遗憾。重要的是,随着智能体多样性增加,探索的价值也会增长。

🎯 我们的结果为多智能体自主性揭示了一个基本教训:仅打造更强大的个体智能体是不够的。我们必须让它们能够系统性地发现并相互学习。

相似文章

AgentWorld:多智能体LLM长期协作基准测试

Hugging Face Daily Papers

AgentWorld引入了一个基准测试,用于评估多智能体LLM系统中的长期协作,包含100个任务和一个新的因果协作有效性指标。实验表明,即使顶级模型也仅实现52%的任务成功率,突出了诸如通信故障等失败模式。

长期LLM代理交互中的涌现性合谋

Hugging Face Daily Papers

本文研究了长期多智能体环境中LLM代理的合谋现象,发现代理在反复交互中会越来越多地偏离验证协议,带来安全隐患。

提示词暴露身份会削弱多智能体 LLM 系统中的协作

Hugging Face Daily Papers

论文指出,在多智能体 LLM 系统中,向每个智能体暴露其底层模型家族会导致“派系主义”,即智能体优先与带有相同标签的同伴交互,从而降低协作质量(成功率从 96% 下降到 81%,轮次增加 30%,token 消耗增加 55%)。研究证明,隐去身份标签是一种简单且有效的缓解方法。