Kolibri – 技术报告 [pdf]
摘要
Aleph Alpha 发布了 Kolibri 的技术报告 PDF,介绍该模型的架构、训练方法与评估结果。
查看缓存全文
缓存时间: 2026/10/03 20:28
相似文章
Kolibri 亮相:一个主权级开放权重模型
Aleph Alpha 发布了 Kolibri,这是一个主权级开放权重的英德双语 Mixture-of-Experts(MoE)模型,总参数量 78B,激活参数量 3B,支持 100 万 token 上下文,采用 Apache 2.0 许可,面向公共管理、工业和航空航天领域的受监管关键任务部署。
Aleph Alpha 发布开源权重 Kolibri,支持 100 万 token 上下文(3 分钟阅读)
Aleph Alpha 发布了 Kolibri,这是一个开源权重的英德双语 Mixture-of-Experts 模型,拥有 781 亿参数(激活参数 34.6 亿),上下文长度最高可达 100 万 token,可基于 Apache 2.0 许可下载,适用于政府和受监管行业的自主、本地化部署。
Aleph-Alpha/Kolibri-1 · Hugging Face - 78B 参数,3.46B 激活,最高支持 1M token 上下文 - Apache 2.0
Aleph Alpha 发布了 Kolibri-1,这是一个开源权重的混合专家(MoE)推理模型,总参数量为 78B(激活参数 3.46B),支持最高 1M token 上下文,重点针对德语和英语,并提供推理模式与工具调用功能,以 Apache 2.0 协议发布。
少说话,多打砖块:Kolibri-1 将概率转化为行动,畅玩 Breakout —— 每步决策延迟低于 25 毫秒
Aleph Alpha 开源模型 Kolibri-1 在未经微调的情况下被展示玩 Breakout,采用针对动作概率优化的推理,将概率转化为具体操作,每次决策延迟低于 25 毫秒。
Show HN:德国的新型主权 AI 模型 Kolibri
Aleph Alpha 发布了 Kolibri,这是一个开放权重的德国/英语主权 Mixture-of-Experts 大语言模型,总参数量为 78B(每个 token 激活约 3.5B),在德国和芬兰的基础设施上从零开始训练,采用 Apache 2.0 协议,权重已在 Hugging Face 上发布,原生上下文长度达 262k token。