关闭广告

华为云CEO:CloudMatrix超节点可实现百万卡超大集群

观察者网9人阅读

9月19日,在华为全连接大会2025主题演讲环节,华为常务董事、华为云计算CEO张平安围绕“全面智能化,成就行业AI先锋”,分享了华为云在AI云服务、大模型、具身智能、AI Agent等领域的技术创新与落地实践。华为高级副总裁、华为云全球Marketing与销售服务总裁杨友桂分享了数智化时代下,华为云帮助企业实现全球业务成功的创新技术和经验思考。

超节点可实现百万卡超大集群

华为云CloudMatrix384昇腾AI云服务已全面上线。未来华为CloudMatrix超节点规格将从384卡升级到8192卡,可实现50-100万卡的超大集群。华为云首创EMS弹性内存存储服务,用内存扩展显存,显著降低大模型多轮对话时延,大幅提升模型使用体验。

随着AI算力需求的暴增,传统的数据中心已不适合构建高效的AI基础设施,单机柜功率要从10千瓦/每柜,升级到70千瓦/每柜,甚至是200千瓦/每柜,要从风冷转变到全液冷。华为云在贵州、内蒙古、安徽部署了全液冷AI数据中心,实现单机柜80千瓦散热,PUE低至1.1,并能够实现AI智能运维。企业无需改造或新建传统数据中心,通过一对光纤,就能获取华为云上高效的AI算力,也可以获得全栈专属AI云服务。

张平安指出,Token服务可以有效屏蔽复杂的底层技术,直接为用户提供最终的AI计算结果,是最高效的推理算力使用方式。CloudMatrix384超节点将算力、内存、显存等资源全面池化,把计算型任务、存储型任务、AI专家系统解耦,将串行任务变成分布式并行任务,极大地提升了系统的推理性能。在在线、近线和离线等不同时延推理场景中

上一页 下一页
版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

二刷《哪吒2》才发现,这些致敬周星驰的细节,抽了翻拍片的脸

娱乐圈笔娱君 浏览 192

硅谷“抢人”大战中OpenAI先乱了?人事主管突然离职 据传也被“挖角”

财联社 浏览 17

雷军底牌金山,再次进入爬坡期

斑马消费 浏览 12

泰国、柬埔寨外长同时出现在云南 还一起喝茶

新民周刊 浏览 14

主播让弗洛伦齐向拉齐奥打招呼,弗洛伦齐:永远不会

懂球帝 浏览 0

会穿的人都跟这个大佬偷师?一篇讲完实用4招!

黎贝卡的异想世界 浏览 14

李想需要新法宝

字母榜 浏览 18

特朗普:以伊完全同意全面停火

央视新闻客户端 浏览 10

演一部剧毁一部的5位“资源咖”,终于露馅了!

律便利 浏览 18

找伊萨克替身!DO:纽卡4000万镑报价维萨遭拒,球员自己想转会

直播吧 浏览 11

沃西:詹姆斯东契奇合作半个赛季就打到西部第三 我看好湖人前景

直播吧 浏览 8

以色列导弹防御成本被指每晚近3亿美元 恐拦截器不足

红星新闻 浏览 11

都体:在战平维罗纳赛后加练中,布雷默因为过度疲劳突然倒地

懂球帝 浏览 9

杨紫再让观众刮目相看,打破宋丹丹当年“忠告”

佳佳优选家居 浏览 359

芦哲:美联储全年降息预期仍存在回调风险——海外周报

首席经济学家论坛 浏览 10

男子驾车被落石砸中身亡 家属向三被告索赔146万余元

扬子晚报 浏览 17

意副总理喊马克龙"戴头盔自己去乌克兰战斗" 法国震怒

澎湃新闻 浏览 14

不长记性?李国庆又夸妻秀恩爱了

正经社 浏览 11

东风集团将退市 岚图汽车将独立上市

网易汽车 浏览 17

特朗普这次真的赢了 风卷残云一样绝杀欧盟七大佬

北回归线 浏览 19

丽江多弗度假酒店:古城深处的纳西文化秘境

商界 浏览 16
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-12
0.101095s