未调优的27B模型在智能体任务中击败了调优的75B模型

Reddit r/LocalLLaMA 论文

摘要

一项比较显示,未调优的27B参数模型在智能体任务中优于调优的75B参数模型,凸显了扩展和微调可能存在的低效问题。

暂无内容
查看原文

相似文章

扩展视野而非参数:以35B智能体达到万亿参数性能

Hugging Face Daily Papers

介绍了Agents-A1,一个35B混合专家智能体模型,通过长视野轨迹缩放和三阶段训练方法(包括SFT、领域级教师和多教师蒸馏)实现了万亿参数级别的性能。在长视野智能体基准测试中,该模型表现优于或媲美更大规模的模型。