Intern-S2-Preview:科学智能体基础模型

Hugging Face Daily Papers 论文

摘要

Intern-S2-Preview 是一个科学智能体基础模型系列,集成了多模态预训练、多任务强化学习和记忆增强扩展,用于长周期科学推理与预测。397B 模型在科学和智能体基准测试中取得了具有竞争力的结果,其独立的记忆解码器扩展在不修改骨干网络的情况下提升了生物学指令性能。

科学发现日益需要能够对异质模态的科学证据进行推理、与科学工具和环境交互、并在长任务周期中持续推进的 AI 系统。我们提出 Intern-S2-Preview,这是一个科学智能体基础模型系列,旨在支持多模态科学理解、推理、生成和长周期任务。训练流程首先对渲染后的科学文档、交错图像-文本数据以及多样化的科学语料库进行科学多模态预训练。从预训练检查点开始,我们应用统一的后训练流程,包括监督微调、可扩展的多任务强化学习(RL)、黑盒与白盒智能体 RL,以及同策略蒸馏。该流程由一系列实用技术支撑,这些技术提高了 rollout 和训练的稳定性与效率,包括带离策略校正的部分 rollout、自适应长度正则化、在线投机解码、稳健的多任务优化,以及面向智能体任务的轨迹感知经验组装。在架构层面,Intern-S2-Preview-397B 将时间序列建模从高效的长序列理解扩展到数值预测,同时 Memory Decoder 作为一种独立的记忆增强路径被研究,用于在不修改冻结的 397B 骨干网络的情况下快速实现科学专业化。跨科学、多模态、智能体和通用基准的评估表明,Intern-S2-Preview-397B 在多种设置下取得了具有竞争力或领先的结果。时间序列模块提升了 SciTS 上的科学信号理解和预测,而独立的 Intern-MemDec-4B 扩展则将 Biology-Instructions 平均分从 56.92 提高到 60.32,且无需修改冻结的 397B 骨干网络。
查看原文
查看缓存全文

缓存时间: 2026/08/14 03:26

论文页面 - Intern-S2-Preview:科学智能体基础模型

来源:https://huggingface.co/papers/2608.13505 发布于 8 月 13 日

#1 本日论文 (https://huggingface.co/papers/date/2026-08-14) 作者:

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

摘要

Intern-S2-Preview 是一个科学智能体基础模型系列,集成了多模态预训练、多任务强化学习和记忆增强扩展,以支持长周期科学推理与预测。

科学发现日益要求 AI 系统能够对异构模态的科学证据进行推理、与科学工具和环境交互,并在长任务周期中持续推进。我们推出了 Intern-S2-Preview,这是一个科学智能体基础模型系列,旨在支持多模态科学理解、推理、生成和长周期任务。训练流程首先在渲染后的科学文档、交错图文数据和多样化科学语料库上进行科学多模态预训练 (https://huggingface.co/papers?q=multimodal%20pre-training)。从预训练检查点出发,我们应用了一个统一的后训练流程,包括监督微调 (https://huggingface.co/papers?q=supervised%20fine-tuning)、可扩展的多任务强化学习 (https://huggingface.co/papers?q=multi-task%20reinforcement%20learning)(RL)、黑盒与白盒智能体 RL (https://huggingface.co/papers?q=agentic%20RL) 以及同策略蒸馏 (https://huggingface.co/papers?q=on-policy%20distillation)。该流程由若干实用技术支撑,这些技术提升了 rollout 与训练的稳定性和效率,包括带异策略校正的部分展开 (https://huggingface.co/papers?q=partial%20rollout)(partial rollout with off-policy correction)、自适应长度正则化 (https://huggingface.co/papers?q=adaptive%20length%20regularization)、在线推测解码 (https://huggingface.co/papers?q=online%20speculative%20decoding)、鲁棒多任务优化 (https://huggingface.co/papers?q=robust%20multi-task%20optimization),以及用于智能体任务的轨迹感知经验组装 (https://huggingface.co/papers?q=trace-aware%20experience%20assembly)。在架构层面,Intern-S2-Preview-397B 将时间序列建模 (https://huggingface.co/papers?q=time%20series%20modelling) 从高效长序列理解扩展到数值预测,同时 Memory Decoder (https://huggingface.co/papers?q=Memory%20Decoder) 作为一条独立的记忆增强 (https://huggingface.co/papers?q=memory-augmented) 路径被研究,用于在不修改冻结的 397B 骨干网络的情况下实现快速科学领域特化。在科学、多模态、智能体和通用基准上的评估表明,Intern-S2-Preview-397B 在多种设置下取得了具有竞争力或领先的结果。时间序列模块提升了在 SciTS 上的科学信号理解与预测能力,而独立的 Intern-MemDec-4B 扩展在不修改冻结的 397B 骨干网络的情况下,将 Biology-Instructions 平均得分从 56.92 提升至 60.32。

查看 arXiv 页面 (https://arxiv.org/abs/2608.13505)查看 PDF (https://arxiv.org/pdf/2608.13505)添加到收藏集 (https://huggingface.co/login?next=%2Fpapers%2F2608.13505)

在你的智能体中获取此论文:

hf papers read 2608\.13505

没有最新的 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用此论文的模型 0

没有模型关联此论文

在模型 README.md 中引用 arxiv.org/abs/2608.13505,即可从本页面关联该论文。

引用此论文的数据集 0

没有数据集关联此论文

在数据集 README.md 中引用 arxiv.org/abs/2608.13505,即可从本页面关联该论文。

引用此论文的 Spaces 0

没有 Space 关联此论文

在 Space README.md 中引用 arxiv.org/abs/2608.13505,即可从本页面关联该论文。

包含此论文的收藏集 0

没有收藏集包含此论文

将此论文添加到收藏集 (https://huggingface.co/new-collection),即可从本页面关联该论文。

相似文章

internlm/Intern-S2-Preview · Hugging Face

Reddit r/LocalLLaMA

InternLM 发布 Intern-S2-Preview,一款 35B 的科学多模态基础模型,通过任务缩放和全链条训练流程,在专业科学任务上达到与万亿级模型相当的性能。

InternScience/Agents-A1 · Hugging Face

Reddit r/LocalLLaMA

Agents-A1 是 InternScience 推出的 35B 参数混合专家(MoE)智能体模型,通过长程轨迹缩放和多教师多领域蒸馏技术,在与 GPT-5.5 和 DeepSeek-V4-pro 等前沿规模系统的对比中展现出具有竞争力的性能。

InternScience/Agents-A1-Q4_K_M-GGUF

Hugging Face Models Trending

InternScience 发布了 Agents-A1,一个拥有350亿参数的混合专家(MoE)智能体模型,通过扩展长程轨迹和异构智能体能力,实现了万亿参数级别的性能,在 Seal-0、HiPhO 和 IFEval 等基准测试中取得了强劲的结果。

基础模型中的集体智能

arXiv cs.CL

本文提出了一种多智能体推理框架,其中多个基础模型通过结构化批评和聚合进行协作,表明模型异构性显著提高了逐步推理的准确性并减少了跨领域的方差。