科技快讯 · 科技快讯-K

摩尔线程开源Megatron-MUSA-Titan,瞄准万亿参数模型训练

来源:IT之家,10月28日 标签:

TECHSIR NEWS FLASH

摩尔线程于10月28日宣布开源Megatron-MUSA-Titan训练基础设施项目,面向大规模模型训练,重点涉及万卡级集群和万亿参数混合专家模型等场景。对国产GPU厂商而言,硬件性能只是构建AI计算生态的一部分,训练框架、分布式计算能力和开发者工具同样重要。开源相关基础设施有助于降低开发者迁移和适配成本,但项目能否形成广泛应用,还取决于实际性能、稳定性和社区支持。

评论交流