标签:大模型

马斯克开源大型语言模型 Grok-1

Grok-1 是一个由 xAI 训练的 3140 亿参数专家混合模型 (8 个专家),给定输入上有 25% 的活跃权重。