去中心化 Master-Mind:多智能体路径规划中基于迭代意图去噪的联合动作细化
摘要
论文提出 DMM(Decentralized Master-Mind),通过在通信轮次中迭代细化动作意图,解决分散式多智能体路径规划中独立采样导致的联合动作不兼容问题,并采用无评论家的组相对强化学习方法 MICPO 进行优化,在 MovingAI 基准上取得接近 100% 的求解率。
查看缓存全文
缓存时间: 2026/10/02 08:27
论文页面 - Decentralized Master-Mind:通过迭代意图去噪实现多智能体寻路中的联合动作优化
来源:https://huggingface.co/papers/2609.32019
摘要
带通信的去中心化多智能体寻路(MAPF)要求各智能体在部分可观测的条件下抵达各自目标且不发生碰撞。在专家数据上训练的可学习策略为解决该问题提供了一种有效方法。然而,当同一情境下存在多个有效的协调联合动作时,从各智能体的独立分布中分别采样,可能会将局部有效的选择重新组合成互不兼容的联合动作。即使各智能体的动作分布已被正确学习,这种失败也可能源于最终的采样机制。DMM(Decentralized Master-Mind)针对这一问题,借鉴扩散模型中的去噪思想,将一次性动作采样替换为跨多个通信轮次对动作意图的离散式迭代优化。智能体首先初始化随机的动作意图,并通过局部通信对其进行优化,在最终确定动作之前实现选择上的耦合。DMM 先基于专家 MAPF 解的模仿学习进行预训练,随后使用 MICPO 进一步优化——这是一种为多智能体、多轮次动作优化设计的无评论家(critic-free)群体相对强化学习方法。在所评测的可学习基线中,DMM 通常取得更高的成功率和更低的解成本。在 1,600 个 MovingAI 任务上,经 MICPO 微调的 DMM 解决了 1,598 个任务,在所评测方法中覆盖范围最高,同时其解成本接近最强基线。DMM 还能扩展到障碍物密集环境中超过一百万个同时行动的智能体。这些结果表明,轮次级的意图优化可以在保持去中心化执行的同时,提升联合动作的协调性。
查看 arXiv 页面 (https://arxiv.org/abs/2609.32019)|查看 PDF (https://arxiv.org/pdf/2609.32019)|GitHub1 (https://github.com/CognitiveAISystems/DMM)|加入收藏 (https://huggingface.co/login?next=%2Fpapers%2F2609.32019)
在你的 agent 中获取此论文:
hf papers read 2609.32019
尚未安装最新版 CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用此论文的模型 0
没有模型链接到此论文。
在模型 README.md 中引用 arxiv.org/abs/2609.32019,即可从本页面链接到它。
引用此论文的数据集 0
没有数据集链接到此论文。
在数据集 README.md 中引用 arxiv.org/abs/2609.32019,即可从本页面链接到它。
引用此论文的 Spaces 0
没有 Space 链接到此论文。
在 Space README.md 中引用 arxiv.org/abs/2609.32019,即可从本页面链接到它。
包含此论文的合集 0
没有合集包含此论文。
将此论文添加到合集 (https://huggingface.co/new-collection) 即可从本页面链接到它。
相似文章
去中心化智能体群中的自组织能力学习
论文提出 Market-Based Post-Training (MPT) 框架,通过竞价机制在去中心化智能体群中联合学习动作策略与自组织能力,在具身制作、机器人导航和深度研究任务上验证了更好的协调性、可扩展性与鲁棒性。
@snwiki238337: 几乎所有人在设计多智能体系统(Multi-Agent)时,都会下意识地掉进同一个思维,必须选出一个中央 agent,或者预先写死一条固定的执行流水线。 在传统认知里,没有领导的团队就是一盘散沙。但只要你在生产环境里跑过多智能体系统,就会发…
哈佛与MIT团队提出MPT(Market-Based Post-Training),在去中心化的多智能体蜂群中通过竞价机制联合学习动作策略与自我编排,无需中央协调器,实验在具身创造、机器人导航与深度研究任务上验证了其在规模扩展、抗节点宕机与任务迁移上的显著优势。
学习何时协作:通过不确定性感知路由实现选择性多智能体医学推理
提出了 SMART-Med,一种完全本地化的多智能体医学推理方法,通过不确定性驱动的路由机制决定何时单智能体作答、何时召集专家协作,并在 MedVR-3K 数据集上微调,以 3.8 倍推理加速和 72% token 节省达到与稠密多智能体方法相当的性能。
面向基于大语言模型的多智能体系统的能力感知编排
该论文提出了一种两阶段的能力感知框架,用于大语言模型多智能体系统的自动编排,根据模型在当前查询上的能力动态调整角色激活与通信图,在六个基准上平均达到 93.81%,同时在高能力骨干模型上降低 36.26% 的词元成本。
CoDA:数据引擎与动作策略的协同演化
CoDA 提出一种仿真数据引擎与机器人动作策略协同演进的框架,通过共享失败与学习进展记忆、视觉语言诊断以及 Text2potential 分阶段势能奖励,将机器人操作任务的分布外成功率从 5.3% 提升至 27.6%,并在 LIBERO-Pro 上取得显著改善。