@raydistributed: 祝贺微软 AI 团队推出 MAI-Thinking-1!很高兴看到 Ray 在前沿模式的多个部分中被使用…
摘要
微软 AI 发布了 MAI-Thinking-1,一个拥有 350 亿活跃参数/1 万亿总参数的 MoE 推理模型,在 STEM 和编码任务上具有竞争力,使用 Ray 进行分布式训练和编排。
查看缓存全文
缓存时间: 2026/06/04 01:58
恭喜微软AI团队推出MAI-Thinking-1!很兴奋看到Ray在前沿模型开发的多个环节中发挥作用。
- 通过任务内重启与热备快速恢复预训练
- 异步RL调度(管理学习器、推理服务器、 rollout worker 以及路由器,每个组件均有不同的部署与容错需求)
- 利用双池Ray集群在3万CPU核心上构建和评分SWE环境
微软AI (@MicrosoftAI):
MAI-Thinking-1是我们首个从头自主研发的推理模型,在STEM推理和编程任务上具备与同规模模型竞争的能力。35B活跃参数/1T总参数MOE模型。
💻编程:SWE Bench Pro 52.8%,与Opus 4.6水平相当
🧐推理:AIME 25 97%
相似文章
@xinyzng:有趣的是,@MicrosoftAI 不仅将 Ray actors 用于控制器和 rollout 工作节点,还将它们用于问题工作节点,以进行...
该推文讨论了微软 AI 使用 Ray actors 训练 MAI-Thinking-1 模型,实现了对异构计算的更细粒度控制,并更好地利用了 GPU 集群中闲置的 CPU 资源。
微软首款高级推理 AI 正式登场
微软在 Build 2026 大会上发布了旗舰推理 AI 模型 MAI-Thinking-1,同时推出其他六款新模型,这标志着微软在自研模型开发上迈出了重要一步。
MAI-Thinking-1
微软AI推出MAI-Thinking-1,这是一个350亿活跃参数的推理模型,从头训练,无需蒸馏,在软件工程和数学基准测试中表现强劲,同时强调干净数据和自给自足。
@mustafasuleyman: 非常兴奋地宣布今天推出七款全新的世界级MAI模型。它们代表了我们认为是AI设计的新时代……
微软宣布推出七款新的MAI模型,包括一个强大的推理模型(MAI-Thinking-1)和编程模型(MAI-Code-1-Flash),以及用于企业定制化的Frontier Tuning。
微软的全新MAI模型
微软宣布推出两款全新大语言模型(LLMs):MAI-Thinking-1(350亿参数推理模型)和MAI-Code-1-Flash(50亿参数代码模型)。两款模型均基于企业级、无污染的干净数据训练,且未使用第三方蒸馏技术。据称,在盲评中,MAI-Thinking-1的受欢迎程度超过了Sonnet 4.6。