国产千亿级大模型训练平台成功落地:支持70B至130B规模,线性加速比高达91%

国产千亿级大模型训练平台成功落地:支持70B至130B规模,线性加速比高达91%的封面图

AIGC动态欢迎阅读

原标题:国产千卡千亿模型训练平台落地:70B到130B大模型训练,线性加速比达91%
关键字:线程,模型,集群,元宇宙,中心
文章来源:量子位
内容字数:5611字

内容摘要:


允中 发自 凹非寺量子位 | 公众号 QbitAI国内首个以国产全功能GPU为底座的大规模算力集群,正式落地!
这是摩尔线程的KUAE智算中心,国产千卡千亿模型训练平台的实现。
摩尔线程CEO张建中在主题演讲中宣布了重要消息,包括大模型智算加速卡MTT S4000,以及专为千亿参数大模型训练和推理提供支持的摩尔线程KUAE平台,他表示:
摩尔线程KUAE智算中心的正式启用,标志着公司发展的重要里程碑。
摩尔线程构建了从芯片到显卡再到集群的智算产品线,借助全功能GPU的多元计算优势,旨在满足不断增长的大模型训练和推理需求,以绿色、安全的智能算力,大力推动人工智能算力、数字孪生、物理仿真、元宇宙等多模态应用的落地,促进各行各业的高质量发展。
同时,摩尔线程与国内众多合作伙伴共同发起并成立了摩尔线程PES-KUAE智算联盟和摩尔线程PES-大模型生态联盟,共同夯实从智算基础设施到大模型训练与推理的国产大模型一体化生态,持续加速我国大模型产业的发展。
MTT S4000:训练与推理兼顾,专为大模型设计的摩尔线程大模型智算加速卡MTT S4000,采用第三代MUSA内核,单卡支持48GB显存和768GB/s。


原文链接:国产千卡千亿模型训练平台落地:70B到130B大模型训练,线性加速比达91%

联系作者

文章来源:量子位
作者微信:QbitAI
作者简介:追踪人工智能新趋势,关注科技行业的最新突破

© 版权声明

相关AI热点

暂无评论

none
暂无评论...