展会信息港展会大全

华为发布新一代AI计算集群:支持万亿参数大模型训练
来源:互联网   发布日期:2023-09-20 19:56:33   浏览:8882次  

导读:华为常务董事、ICT基础设施业务管理委员会主任、企业BG总裁汪涛 腾讯科技讯 9月20日消息,华为今日举办的全联接大会上,华为常务董事、ICT基础设施业务管理委员会主任、企业BG总裁汪涛发表加速行业智能化主题发言,同时发布支持万亿参数大模型训练的腾AI计算...

华为发布新一代AI计算集群:支持万亿参数大模型训练

华为常务董事、ICT基础设施业务管理委员会主任、企业BG总裁汪涛

科技新闻讯 9月20日消息,华为今日举办的全联接大会上,华为常务董事、ICT基础设施业务管理委员会主任、企业BG总裁汪涛发表“加速行业智能化”主题发言,同时发布支持万亿参数大模型训练的腾AI计算集群Atlas 900 SuperCluster。

汪涛认为,落实加速行业智能化这一目标,需要从智联万物、智算万数、智赋万业三个方面着力。

汪涛介绍称,“过去三年,华为成立行业军团,深入行业、深入场景,纵向缩短管理链条,更好地响应客户智能化需求;横向快速整合研发资源。”

据了解,华为目前已经面向城市、金融、交通、制造等20多个行业打造了200多个智能化解决方案。

在主题演讲环节,汪涛还发布了支持万亿参数大模型训练的腾AI计算集群Atlas 900 SuperCluster。

据介绍,新集群采用华为星河AI智算交换机CloudEngine XH16800,借助其高密的800GE端口能力,两层交换网络即可实现2250节点(等效于18000张卡)超大规模无收敛集群组网。

官方表示,新集群同时使用了创新的超节点架构,大大提升了大模型训练能力,借助华为在计算、网络、存储、能源等领域的基建,将大模型训练稳定性从天级提升到月级。

此外,华为还发布了全新的CANN7.0,全面兼容业界AI框架、加速库和主流大模型,并深度开放底层能力,让AI框架和加速库可以更直接地调用和管理计算资源,使能开发者自定义高性能算子。

而面向Transformer网络模型的开发,华为也升级了Ascend C编程语言,简化算子实现逻辑,将融合算子的开发周期从2人月缩短到2人周,使能AI模型与应用的快速开发。

赞助本站

相关内容
AiLab云推荐
推荐内容
展开

热门栏目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能实验室 版权所有    关于我们 | 联系我们 | 广告服务 | 公司动态 | 免责声明 | 隐私条款 | 工作机会 | 展会港