# 卡达舍夫-0.7:Banbury 通过强化学习同时训练 32 个不同的模型
摘要
Banbury Road 揭晓 Kardashev-0.7:一个由 32 个各具特色的模型组成的群体,通过强化学习联合训练,以追求 **Population Scaling(群体扩展)**。该项目将模型数量与协作本身视作一条全新的扩展轴线,借此走向互补式的专业化分工。
Banbury Road 的公告介绍了 Kardashev-0.7:一个由 32 个不同模型组成的群体(population),通过 RL 进行"群体规模扩展"(Population Scaling)联合训练。其核心思路是在多个模型之间学习互补的专长,让模型数量和协作方式成为一条新的扩展维度。要评估这一方向,一个有意思的问题是:在总计算量相同的情况下,联合训练相比将多个独立训练的模型做集成(ensemble)能带来多少提升。
https://x.com/MLCatttt/status/2107147690450817259
相似文章
@alex_verem: 一组研究人员刚刚证明,你不需要更大的模型,你需要更聪明的计划。来自清华大学和……
来自清华大学和华南理工大学的研究人员引入了原子任务图(ATG),这是一个框架,通过基于有向图的规划和内部模拟,大幅降低幻觉率,使7B-8B开源模型在不进行微调的情况下,在复杂智能体基准测试中超越GPT-4。
训练推理模型生成多样的科学创意
研究者提出了一种集合级强化学习目标,用于训练语言模型生成多样的、高质量的、基于文档的科学创意,其中8B模型在创意实用性方面超越了Claude Opus 4.8和GPT-6 Astra。
@yuetai12575: 兴奋地看到随着模型扩展,收益进一步持续!
文章报道了OpenRSI的Marin-Scaling-Ladder实验的初步结果,其中AI代理自主提出、实现和评估新的优化器,跨越从550M到2.5B的模型规模,发现了PSPR和Codex (GPT-5.6)。
DeepReinforce 发布 Ornith-1.0 开源编程模型(2分钟阅读)
DeepReinforce 开源了 Ornith-1.0,这是一系列自我改进的编程模型,参数从 9B 到 397B 不等,基于 Gemma 4 和 Qwen 3.5 基础模型训练,采用了一种新颖的强化学习方法,能够学习生成自己的脚手架。
Agents-A1-4B (Qwen3.7-4B ???):扩展能力而非参数规模
Agents-A1-4B是InternScience推出的一款紧凑型4B参数模型,在多项智能体和推理基准测试中取得了最先进的结果,通过扩展能力而非参数规模超越了更大模型。