财联社 8 月 25 日讯 (编辑 周子意)埃隆·马斯克的 xAI 开源模型了。周日 (8 月 24 日),xAI 宣布将其人工智能模型 Grok 2.5 开源,并发布在了开放源代码平台 Hugging Face 上。
马斯克在社交媒体 X 上写道。「去年 xAI 最出色的 Grok 2.5 模型现已开源。至于 Grok 3,其将在大约 6 个月内实现开源。
马斯克还发帖称,「xAI 很快就会超越除谷歌外的任何公司,然后也将超越谷歌。但中国公司将会是最强劲的竞争对手,因为他们的电力比美国多得多,而且在硬件建设方面实力超强。」
此次开源 Grok 2.5 可以视作马斯克兑现当初的承诺。去年 8 月 Grok 2.5 发布时,马斯克曾公开表示,每当创建 Grok 新版本的时候,就会开源之前的一个版本。
随着最新 Grok-4 模型已于 7 月发布,马斯克是时候开源去年的大模型版本了。今年 7 月,xAI 发布了 Grok 4 系列最新推理模型,分为 Grok 4 和 Grok 4 Heavy,支持最高 25.6 万 tokens 的上下文窗口。
从 Grok 2.5 的水平来看,其总参数量高达 9050 亿,在推理时每次激活其中的 1360 亿参数,使其成为目前最强大的开源模型之一;它还支持高达 13.11 万 tokens 的上下文长度,剋一次性处理长文档和对话历史;其还采用混合专家 (MoE) 架构,可以在不断增加巨大计算成本的前提下大幅扩展模型规模。
关于开源权限,xAI 表示,仅允许非商业与合规商业使用,但禁止用其训练其他基础模型。xAI 明确,仅当关联公司年收入低于一百万美元时,才可用于商业用途,超过此门槛的商业用途需获得 xAI 的单独许可。
对此,人工智能工程师 Tim Kellogg 将 Grok 的许可证描述为是 「定制版」 的,因为其中包含了一些反竞争条款。