IT之家 03-27
摩尔线程MTT S5000适配FlagOS训练全要素软件栈
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_keji1.html

 

IT 之家 3 月 27 日消息,摩尔线程今日发文,北京智源人工智能研究院(简称:智源研究院)正式发布重磅验证成果:六款 AI 芯片、三大模型、同构 + 异构千卡 —— 众智 FlagOS 以统一技术栈完成 AI 训练 " 全要素 " 验证。

IT 之家注意到,作为本次验证的核心参与厂商之一,摩尔线程基于旗舰级 AI 训推一体全功能 GPU 智算卡 MTT S5000,完整适配了 FlagOS 训练全要素软件栈 —— 包括 FlagScale 系统调度决策框架、Megatron-LM 分布式训练框架、Transformer Engine 加速库、FlagGems 与 Triton 算子库,以及 FlagCX 通信库。

在此次验证中,MTT S5000 面向 Qwen3-0.6B 语言模型完成了 1T Tokens 从头训练验证,实现连续 6 天以上、超过 14000 步的无中断稳定训练。训练所得模型 Loss 曲线与基线高度一致,平均相对误差控制在 0.82% 以内;在标准下游任务评测中,较行业标杆基线提升 1.65 个百分点,充分验证了全功能 GPU 算力在大模型端到端训练中的稳定性与有效性。

宙世代

宙世代

ZAKER旗下Web3.0元宇宙平台

一起剪

一起剪

ZAKER旗下免费视频剪辑工具

相关标签

摩尔 ai it之家 gpu 人工智能
相关文章
评论
没有更多评论了
取消

登录后才可以发布评论哦

打开小程序可以发布评论哦

12 我来说两句…
打开 ZAKER 参与讨论