FlexRouter:为灵活的 LLM 路由学习互补模型集合

Hugging Face Daily Papers 论文

摘要

FlexRouter 提出了一种以覆盖率为导向的 LLM 路由框架,利用行列式点过程(Determinantal Point Processes)建模模型之间的互补性,最大化至少有一个被选中模型回答正确的概率,同时避免冗余选择和固定的计算预算。

现有的大语言模型(LLM)路由方法通常对各模型独立打分,以选出 top-k 个模型。然而,这种做法忽略了模型之间的相关性,并施加了刚性的计算预算。因此,路由器往往选中那些共享失败模式的冗余模型,限制了整体的成功概率。为此,我们提出了 FlexRouter,一个显式建模模型互补性的路由框架。FlexRouter 以答案覆盖率为优化目标,最大化至少有一个被选中模型给出正确回答的概率。这一目标与实际的推理流程相契合:在实际流程中会生成多个候选输出,再由下游验证器或用户选出最终答案。我们将路由形式化为一个以覆盖率为导向的子集选择问题,并使用行列式点过程(DPP)来建模路由策略,DPP 能够自然地刻画模型的能力与冗余性。为了在无需真实目标子集的情况下直接优化覆盖率,我们引入了基于对失败集合进行边缘化的训练目标。在推理阶段,我们采用基于边缘对数行列式增益的贪心策略,使路由器能够在没有预定义预算的情况下自适应地确定子集大小。在大规模 RouterEval 基准上的大量实验表明,我们提出的 FlexRouter 在域内和域外任务上均能以更低的冗余实现更高的覆盖率,超越了强基线方法,同时保持了灵活的推理成本。
查看原文
查看缓存全文

缓存时间: 2026/10/02 04:26

论文页面 - FlexRouter:学习互补模型集以实现灵活的大语言模型路由

来源:https://huggingface.co/papers/2609.38585

摘要

现有的大语言模型(LLM)路由方法独立地为各个 LLM 打分,以选出 top-k 模型。然而,这种做法忽略了模型之间的相关性,并施加了僵化的计算预算。因此,路由器往往选出存在失败模式重叠的冗余模型,限制了整体的成功概率。为了解决这一问题,我们提出了 FlexRouter——一个显式建模模型互补性的路由框架。FlexRouter 以答案覆盖率为优化目标,最大化至少有一个被选模型能给出正确回答的概率。这一目标与实际的推理流程相一致:在实际流程中,会生成多个候选输出,并由下游验证器或用户从中选出最终答案。我们将路由问题形式化为一个以覆盖为导向的子集选择问题,并使用行列式点过程(Determinational Point Processes, DPPs)来建模路由策略,从而自然地同时捕捉模型能力和冗余度。为了在不需要真实目标子集的情况下直接优化覆盖率,我们引入了一种基于对失败集合进行边缘化(marginalization)的训练目标。在推理阶段,我们采用基于边际对数行列式增益的贪心策略,使路由器能够自适应地确定子集大小,而无需预设预算。在大规模 RouterEval 基准上的大量实验表明,与强基线相比,我们提出的 FlexRouter 在领域内和领域外任务上都以更低的冗余度实现了更高的覆盖率,同时保持了灵活的推理成本。

查看 arXiv 页面 (https://arxiv.org/abs/2609.38585)|查看 PDF (https://arxiv.org/pdf/2609.38585)|添加到收藏集 (https://huggingface.co/login?next=%2Fpapers%2609.38585)

将此论文导入你的 agent:

hf papers read 2609\.38585

还没有最新版 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用此论文的模型 0

没有模型链接到此论文

在模型 README.md 中引用 arxiv.org/abs/2609.38585,即可从此页面链接。

引用此论文的数据集 0

没有数据集链接到此论文

在数据集 README.md 中引用 arxiv.org/abs/2609.38585,即可从此页面链接。

引用此论文的 Space 0

没有 Space 链接到此论文

在 Space README.md 中引用 arxiv.org/abs/2609.38585,即可从此页面链接。

包含此论文的收藏集 0

没有收藏集包含此论文

将此论文添加到收藏集 (https://huggingface.co/new-collection),即可从此页面链接。

相似文章

FlexRouter:学习用于灵活 LLM 路由的互补模型集合

arXiv cs.LG

FlexRouter 提出一种显式建模模型互补性的 LLM 路由框架,将路由建模为基于覆盖的子集选择问题,并用 Determinantal Point Processes 对模型能力与冗余进行联合建模,同时通过边缘化失败集合的目标函数直接优化答案覆盖率。在 RouterEval 基准上,该方法在域内与域外任务上以更低冗余实现了更高的覆盖率,且推理成本灵活可控。

一次预训练,随处路由:迈向LLM路由的基础模型

Hugging Face Daily Papers

论文提出了RouteFM,一个面向LLM路由的基础模型,通过跨异构环境的情景化预训练学习可复用的路由能力,使一个冻结的路由器仅凭行为上下文即可适应新的领域、模态和候选模型池。在MMR-Bench上,RouteFM仅凭每个候选8条观测就以2.23个质量点领先最强基线,支持'一次预训练、随处路由'的范式。