数码之家

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
查看: 73|回复: 1

[科技] 微软完成SOTA基模MAI-Base-2预训练,性能强于所有参测开源权重模型

[复制链接]
发表于 昨天 21:57 | 显示全部楼层 |阅读模式

爱科技、爱创意、爱折腾、爱极致,我们都是技术控

您需要 登录 才可以下载或查看,没有账号?立即注册

x
Microsoft(微软)当地时间昨日宣布,其已经完成了新一代 SOTA 基础模型 MAI-Base-2 的预训练工作。这一模型在性能方面强于所有参测开源权重模型。
MAI-Base-2 总参数规模达 2.8T,活跃参数规模 80B,在 6,000 个 NVIDIA GB200 GPU 上历经 38 天训练而成。在整个训练过程中,该模型平均浮点算力利用率为 21%、有效吞吐量为 89%。
根据微软的说法,MAI-Base-2 的预训练算力效率是 DeepSeek-V4-Pro-Base 的 4~12 倍。
微软表示,三项举措对于 MAI-Base-2 的成功预训练尤为重要:科学规模化、模型-基础设施协同设计、数据规模化。在完善 MAI-Base-2 的同时,这家科技巨头已启动 MAI-Base-3 的准备工作。

发表于 5 小时前 | 显示全部楼层
游客请登录后查看回复内容
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

APP|手机版|小黑屋|关于我们|联系我们|法律条款|数码之家-技术知识分享平台

闽公网安备35020502000485号

闽ICP备2021002735号-2

GMT+8, 2026-10-17 06:35 , Processed in 0.078001 second(s), 8 queries , Gzip On, Redis On.

Powered by Discuz!

© MyDigit.Net Since 2006

快速回复 返回顶部 返回列表