来自 arXiv 的文章
StrictPRMBench 引入了一个可重放的基准,用于审计固定评分下的 PRM 聚合规则(乘积与几何平均值)如何影响 N 选一择优,结果表明,在 14 个实验单元中,乘积聚合导致的删除诱发选择不稳定性更高,并提供了可复现的再分析材料。
该论文提出了 PIFT,这是一个通过在采样时对掩码离散扩散和流匹配进行联合引导,将肽–靶标相互作用模式迁移至小分子生成的框架,旨在靶向具有挑战性的蛋白质–蛋白质相互作用界面,并取得了优异的分子对接结果。
rl_rob 是一个开源的、从零实现的 Python 库,用于强化学习教学,涵盖从表格型时序差分(TD)方法、线性函数近似,到基于深度学习的价值方法和策略梯度方法,并提供清晰易懂、仅需几行代码的更新规则和统一的智能体接口。
SPT-Flow 提出一种连续时间世界模型的训练方法:每条轨迹采样一个隐变量,并将自由运行的 ODE 展开与多个读出时刻的演示状态对齐,从而克服监督捷径问题。在 LIBERO 上,该方法相对 ODEWorld 基线在中段与最终帧的 best-of-10 PSNR 分别提升 2.0 和 2.4 dB,平均 LPIPS 降低 23%。
一个用于估计数据依赖事件概率的统一框架,涵盖缺失质量、自适应数据分析和测试误差估计,并提出新的混合式 Good–Turing 风格估计量,以及基于 VC 维和互信息的界。
本文提出了一种散度核方法,用于联合训练神经随机微分方程的漂移场和扩散场,其损失函数直接依赖于终端密度。在采用时间无关场的高斯混合基准测试中,该方法生成的偏离模态的样本少于基于得分的生成模型。
该论文提出了协证学习(Corroborative Learning,CL),一种让独立训练的模型相互增强的方法:从协作模型的表征中重建任务响应增量,并在重建时排除源模型,从而避免直接匹配输出或特征。在涵盖24个模型和36个模型对的六项语言任务评估中,CL的表现始终优于容量匹配的独立适配方法以及现有的迁移学习和互学习方法。
本文在受控的单头注意力设定下提出了一种用于长度泛化的可实现性理论,通过仿真迁移算子推导出相对位置编码与绝对位置编码在外推行为上存在差异的原因,并通过对2625个已训练模型的实验验证了这一理论结构。
本文提出了一种受控评估框架,将独立类别支持与表征分配分离,以确定在长尾识别中进行分类器校正后,何时仍值得对编码器进行适配,并表明仅改变基准的构建方式就能逆转这一训练决策。
该论文提出了角色感知服务器优化(RASO),一种将贡献者选择与针对不同角色的服务器动量更新相协调的方法,以改善部分模态缺失情况下的多模态联邦学习,并在多个数据集和多种融合架构上验证了其有效性。
该论文证明了梯度下降下有限线性逼近类的一般频率原则,表明高频分量的幅值在训练过程中一致趋于零,并给出了低频优先的充分条件,还通过勒让德基和三角函数基的数值实验进行了验证。
该论文提出了 CAP(候选获取策略),这是一种从相关黑盒优化任务的稀疏记录中学习以反馈为条件的查询策略的方法,在四类合成问题和两个工程基准(BOPTEST、SU2)上,在预算耗尽时取得了最佳结果。
微软 AI 推出 TalentRL,这是一种策略引导的强化学习框架,用于在大语言模型智能体的程序性记忆中进行分层路由,由粗粒度的“才能”指导细粒度技能的选择。该框架提高了七个问答基准上的成功率,并在采用 Qwen 和 Llama 作为骨干模型时,在 ALFWorld 上达到 99.3% 的成功率,在 WebShop 上取得 90.7 的得分。
该论文提出了 Muon-RT,这是 Muon 优化器的一种无动量变体,它复用大语言模型自蒸馏中 EMA 教师模型与学生模型之间的权重位移,无需单独的动量缓冲区,同时在 Qwen2.5-7B 和 Olmo-3-7B 上提高了准确率,并减少了训练期间的持久内存占用。
该论文研究随机舍入如何影响低精度训练中的预测风险,针对两层线性网络推导了匹配的上下界,并给出了随计算量、模型规模、训练时长与精度变化的缩放定律,揭示前向与后向舍入对最优计算缩放的不同影响。
该论文发现,在RL后训练中,当fp32主权重通过bf16四舍五入导出时,大多数小于半个bf16间隔的策略更新会被静默丢弃,使采样器落后优化器50–150步;作者提出了仅需一行代码的Fair Cast(随机舍入/误差反馈),在Qwen3-0.6B到4B的25组配对实验中平均提升6.1分。
本文对图神经网络中不可约表示之间的非线性交互进行了按次数分解的分析,并提出了 Specht Triple,这是一种用于无序图三元组的残差架构。在采用冻结 GIN 骨干网络的合成基准测试中,该架构相较于参数量匹配的对照模型,将测试均方误差(MSE)降低了 11.05%。
一篇学术论文提出了一种相关私有量化方法,用于车联网中通信高效、满足局部差分隐私的联邦强化学习,并结合后量子认证;论文报告称,与独立量化相比,经认证的上行传输数据量减少了92.4%,平均行程时间降低了14.3%。
该论文提出了 CUTTIE,一种分层检验方法。该方法将训练好的网络中的单元聚类成树状结构,并通过条件独立性检验自上而下地对这些单元进行检验,以定位具有预测作用的概念(例如调控性 DNA 基序),同时控制族错误率。论文在一个根据序列预测染色质可及性的模型上展示了该方法。
该论文采用上下文马尔可夫决策过程(MDP)来描述持续强化学习,将上下文划分为行为和物理两个组成部分,并使用 Dyna-Q 和 TD-MPC 在 FourRooms 任务中研究世界模型的零样本复用。研究发现,物理上下文的变化会显著降低复用效果,而影响程度取决于观测表示。论文指出,表示的泛化能力是持续强化学习中可靠复用世界模型的关键瓶颈。