来自 arXiv 的文章
论文提出了 SCAPE-T,一种基于编码器 Transformer 注意力的语义复杂度度量方法。在控制词长后,该方法以 78.5% 的成对准确率显著优于可读性与词法基线,并以 Python 包的形式开源。
本文研究了用于适配医学语言模型的基于扰动的数据选择方法(RSP 和 RSP-Drop)。在使用 MedGemma-4B 对五个医学问答数据集进行评估时,这些方法的 Macro-F1 分数优于随机选择方法。
提出了 SMART-Med,一种完全本地化的多智能体医学推理方法,通过不确定性驱动的路由机制决定何时单智能体作答、何时召集专家协作,并在 MedVR-3K 数据集上微调,以 3.8 倍推理加速和 72% token 节省达到与稠密多智能体方法相当的性能。
本文比较了人类与大型语言模型在将新造动词从主动语境扩展到被动语境时的语言能产性,发现即使无法赋予这些动词任何意义,人类仍能基于抽象句法形式进行泛化,而大型语言模型只有在这些动词具有与现有动词相似的意义时才能成功。
提出CoEvolve框架,通过反事实轨迹对比实现多智能体系统中记忆与协作架构的对齐协同进化,在ALFWorld和WebShop基准上取得最佳综合性能。
该论文通过受控实验研究了不同意见混合比例的后训练语料如何在SFT、DPO和GRPO等五种后训练路径中放大LLM的价值偏好失衡,并发现这些偏好可通过蒸馏传递给学生模型,建议在开发和评估LLM时应同时考虑语料意见构成与后训练方法的选择。
FraudSociety 是首个联合建模信息与金融动态的 LLM 智能体仿真系统,用于模拟金融诈骗经济并评估反欺诈干预策略的有效性。
该论文提出了 InsightAgents,一个从相关论文构成的图中提炼洞见的框架,为大语言模型辩论智能体提供以文献为依据的专业知识,以协作生成研究创意,并在 100 个自然语言处理主题上优于三种基线方法。
论文提出使用直接偏好优化(DPO)微调定义生成器,以减少同一词义下定义过度分化的问题,并在学术基准和欧盟可持续金融术语的历时语义变化审计任务上进行了验证。
SkillShift-Bench 首次提出了一个基准,用于评估网页智能体在受控开放环境变化(上下文、感知和执行层面)下的技能学习,揭示了鲁棒性的系统性下降,并提出一种测试时自适应方法,无需重新学习即可改善环境变化后的技能执行表现。
本文追踪了 Pythia-1b 和 Pythia-410m 模型中主谓数一致性回路在训练过程中如何涌现并逐渐稀疏化,发现模型行为在早期便趋于稳定,而底层回路仍不断重组、变换所涉及的注意力头,并逐步缩减,最终呈现出极为稀疏的形态。
提出 MARCA 四智能体框架,利用 Gemini 2.5 Pro 和 DeepSeek-V3.2 结合检索增强生成(RAG)对 FAERS 个体案例安全报告进行基于 Naranjo 量表的因果关系评估,最终因果分类与人类专家的一致率达 79.4%(κ=0.587)。
该论文提出了多变量时间序列超分辨率预测(MTS-SRF)任务及 TimeMagnifier 模型,能够从粗粒度历史数据中预测细粒度未来,在十个数据集上以 12.3% 的平均 MSE 降低击败 15 个基线。
论文提出 LegoSR,一个统一的符号回归与微分方程发现框架,通过共享的方程中间表示整合七个求解器,并引入 LegoSR Agent 基于求解器知识和历史经验自适应选择求解器,在含噪 ODE/PDE 基准上接近七个专家调优求解器的并集性能,较通用 agent 最高提升 29 个百分点。
FlexA-Mem 提出一种预算自适应的智能体记忆机制,将历史一次性写入不可变存储,并为每次调用动态渲染紧凑的时间线记忆加相关细节,在 AppWorld、LongMemEval 和 LoCoMo 上显著优于 A-Mem 等现有方法。
该论文提出了一个统一的六维分析框架,系统综述了2017–2026年大模型训练全流程(数据与分词、预训练、SFT与偏好对齐/强化学习)的395篇核心文献,并揭示了跨阶段效应与多个开放问题。
本文在内容审核任务上,将一个成本低廉、参数冻结的“系统一”分类模型与14个前沿大语言模型进行对比评估,发现其准确率具有竞争力,而成本远低于后者,并表明“置信度”混淆了两种不同的不确定性——人类意见分歧与决策风险——而这两者需要方向相反的升级处理信号。
本文介绍了 BoardSafety,这是一个基于厂商数据手册构建的基准,用于评估大语言模型能否判断某项操作对特定开发板是否安全。结果表明,即使能够获取针对特定开发板的规则,当前模型仍无法可靠地作出安全判断。
本文构建了 EventTyp 和 EventTypGold 语料库,用于研究对话中的典型性与非典型性推断,发现人类依赖三种线索——常识知识、话语强调和挖苦——而大语言模型由于缺乏有关事件典型性的常识知识,在此类推断中表现不佳。
论文提出ConMem算法,将LLM智能体的长期记忆保留决策重构为反事实因果推断,并构建MemAlign基准(1,079个记忆案例)来研究记忆错位问题,实验表明该方法在缓解过度保留偏差的同时保持个性化效用。