Grok-1 是一个由 xAI 训练的 3140 亿参数专家混合模型 (8 个专家),给定输入上有 25% 的活跃权重。该权重为2023年10月预训练结束时的原始权重,这意味着此时没有针对任何特定对话进行微调。
来源:xAI (https://x.ai/blog/grok-os)
© 版权声明
本站专栏文章版权归作者所有,未经允许请勿转载。
相关文章
暂无评论...
Grok-1 是一个由 xAI 训练的 3140 亿参数专家混合模型 (8 个专家),给定输入上有 25% 的活跃权重。该权重为2023年10月预训练结束时的原始权重,这意味着此时没有针对任何特定对话进行微调。
来源:xAI (https://x.ai/blog/grok-os)
仅对图片背景生效
4K壁纸
随机动态