关闭广告

华为云CEO:CloudMatrix超节点可实现百万卡超大集群

观察者网84人阅读

9月19日,在华为全连接大会2025主题演讲环节,华为常务董事、华为云计算CEO张平安围绕“全面智能化,成就行业AI先锋”,分享了华为云在AI云服务、大模型、具身智能、AI Agent等领域的技术创新与落地实践。华为高级副总裁、华为云全球Marketing与销售服务总裁杨友桂分享了数智化时代下,华为云帮助企业实现全球业务成功的创新技术和经验思考。

超节点可实现百万卡超大集群

华为云CloudMatrix384昇腾AI云服务已全面上线。未来华为CloudMatrix超节点规格将从384卡升级到8192卡,可实现50-100万卡的超大集群。华为云首创EMS弹性内存存储服务,用内存扩展显存,显著降低大模型多轮对话时延,大幅提升模型使用体验。

随着AI算力需求的暴增,传统的数据中心已不适合构建高效的AI基础设施,单机柜功率要从10千瓦/每柜,升级到70千瓦/每柜,甚至是200千瓦/每柜,要从风冷转变到全液冷。华为云在贵州、内蒙古、安徽部署了全液冷AI数据中心,实现单机柜80千瓦散热,PUE低至1.1,并能够实现AI智能运维。企业无需改造或新建传统数据中心,通过一对光纤,就能获取华为云上高效的AI算力,也可以获得全栈专属AI云服务。

张平安指出,Token服务可以有效屏蔽复杂的底层技术,直接为用户提供最终的AI计算结果,是最高效的推理算力使用方式。CloudMatrix384超节点将算力、内存、显存等资源全面池化,把计算型任务、存储型任务、AI专家系统解耦,将串行任务变成分布式并行任务,极大地提升了系统的推理性能。在在线、近线和离线等不同时延推理场景中

上一页 下一页
版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

福特纯电烈马:倒反天罡还是赛博朋克越野范儿?

网易汽车 浏览 78

AI时代,汽车行业需要一个什么样的“家”?

雪豹财经社 浏览 86

加入更多专属设计 全新小鹏P7鹏翼版官图发布

网易汽车 浏览 92

从月销20.9万辆到4.5万辆,某车企无奈承认:已站在生死存亡边缘

小李车评李建红 浏览 85

把上万个AI丢在一个小镇里打工,会发生什么?

差评XPIN 浏览 96

世间只此一次,《西厢记》4K默片配乐来了!

幕味儿 浏览 1098

推广|| 用了5年才来推荐,多亏它保住我的发际线

黎贝卡的异想世界 浏览 89

阅兵训练场上女民兵英姿飒爽

人民网-人民日报 浏览 62

4万店美宜佳,为何沦为假烟集散地?

斑马消费 浏览 7

纯电六座SUV,谁主沉浮?

盖世汽车 浏览 69

问界M8官宣将增瑞红/湛蓝双新色 将于3月23日发布

网易汽车 浏览 6

“北溪”爆炸案一嫌疑人被引渡至德国受审

极目新闻 浏览 20

伊姐周六热推:电视剧《逐玉》;电视剧《江湖夜雨十年灯》......

伊周潮流 浏览 8

李想:理想i8市场反响不错 因为产品力上它没有对手

大象新闻 浏览 78

全国首台小米SU7出租车投入运营 当事人:收入翻一倍

极目新闻 浏览 76

媒体:高市早苗胆子挺肥要住有名凶宅 安倍晋三都不敢

新民晚报 浏览 24

锋寻生物完成近6000万元种子轮及天使轮融资,加速体内CAR-T疗法临床转化 | 融资首发

钛媒体APP 浏览 30

黄金现在不是买入时候,泡沫还没消化完

菜鸟理财 浏览 30

暴瘦脱相后依旧无美感,蒋欣吃了骨架大的亏

陈意小可爱 浏览 77

DeepSeek线上模型版本升级

第一财经资讯 浏览 78

刘嘉玲的老公梁朝伟还能继续救她吗?

桑启红原 浏览 65
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-12