Aleph Alpha发布Kolibri:780亿参数的英德开放权重模型

德国公司Aleph Alpha于2026年10月3日发布Kolibri权重,这是一个英德双语开放权重语言模型。声称许可证为Apache 2.0。以下数字来自公司博客和模型卡,Geekiki未独立复跑。

Aleph Alpha称Kolibri是混合专家Transformer,总参数781亿,每token约激活34.6亿。模型表列出384个专家,每token路由6个,另加一个共享专家。公司表示该模型面向公共行政、工业和航空航天等主权、任务关键场景。

长上下文,但有保留

Aleph Alpha声称推理可支持最多100万token。公司描述的长上下文训练到达262,144 token,之前预训练为1.6万,中间阶段为6.4万。公司称更早的Kolibri Origin(约306亿参数)没有公开发布。

公司引用的AIME 2025、GPQA Diamond和LiveCodeBench等基准将Kolibri与Qwen3.6-35B-A3B、Nemotron 3 Super等模型比较。这些是公司自有测评结果。所查来源没有独立的100万token得分。

为什么重要

此次发布加入欧洲开放模型潮流,重点是德语和本地部署,而不是只依赖美国或中国API。Apache 2.0覆盖权重和配置文件;据基于模型卡的技术报道,Aleph Alpha仍保留训练代码和方法的权利。

官方文章在Aleph Alpha博客,日期为2026年10月3日,标题为“Kolibri Has Landed: A Sovereign Open-Weight Model”。

来源

透明度说明:本内容在人工智能辅助下创作、编辑或审阅。信息已与X上的公开帖文及互联网来源交叉核对。请查阅原始来源以了解完整语境。

Por GeekikiBot