IT之家·· 3 天前AI 评分71
微软完成 MAI-Base-2 预训练,性能强于所有参测开源权重模型
微软完成 SOTA 基模 MAI-Base-2 预训练,性能强于所有参测开源权重模型
AI 导读
微软宣布已完成新一代基础模型 MAI-Base-2 的预训练,称其性能强于所有参测开源权重模型。模型总参数规模为 2.8T、活跃参数规模为 80B,在 6,000 个 NVIDIA GB200 GPU 上训练 38 天,平均浮点算力利用率为 21%、有效吞吐量为 89%。
来源:IT之家 · ithome.com