6月5日,在中国国际信息通信展览会期间,华为数据存储产品线副总裁顾雪军在算力创新发展高峰论坛上发表主题演讲,详细阐述了先进数据存力建设的六大创新方向。
数据基础设施在数字经济发展中处于基石地位,存力、算力和运力是三个重要的组成部分。当前,相较于存力领先国家,我国数据存力建设仍处于发展阶段,在存算比、闪存占比等多个方面有较大提升空间。通过加强先进数据存力建设,可以有效提升IT数据基础设施的能力,促进数字经济的繁荣。
顾雪军表示,数据基础设施的创新发展需要适应新应用、新数据、新安全的变化。为建设高质量的数据基础设施,未来数据存储建设将从三维向多维发展,除传统的容量、可靠、性能三个维度外,能效、安全与多云生态将牵引先进数据存力的发展。发展先进数据存力,未来应聚焦6个方面的创新:
先进介质创新
据统计,全球闪存存储发展迅速,闪存存储占比已经达到50%以上。数据中心能耗的30%消耗在数据存储上,闪存盘在能耗、性能、容量密度等多方面显著优于机械盘,使用半导体存储介质将是未来先进数据存力建设的潮流。
新兴应用承载
大数据、HPC、人工智能等应用大量涌现,对数据基础设施的承载能力提出更高要求。以大数据场景为例,多数基于存算一体架构设计,算力和数据的生命周期管理差异越来越大,算力、存储资源难以独立规划和扩容。采用存算分离架构实现计算和存储资源的按需扩展,资源规划更清晰更节约。
多云数据协同
多云建设模式下,面临着数据共享难、数据流动难、应用改造难的新挑战。打造应用多云部署,数据共享和跨云流动的最佳多云数据基础设以实现数据在多云之间流动,将是先进数据存力的重要方向。
Diskless架构
数据中心,尤其是公有云数据中心采用了大量服务器。未来数据量持续暴增的趋势下,传统服务器本地盘方案面临诸多挑战,应用先进的数据中心Diskless新型架构,可进一步打造绿色集约、按需扩展、安全可靠的数据中心。
数据安全可靠
数据安全威胁从自然灾害、物理损坏扩展到勒索软件攻击等人为损坏。为保障数据的安全可靠,除做好传统容灾和备份建设,存储加密和存储防勒索也成为需要重点关注的话题,应以内生安全存储构筑数据安全最后一道防线。此外还需建设存储安全治理体系,降低开源软件漏洞风险。
绿色低碳节能
存储能耗在数据中心中占比约30%,绿色发展需要存储系统能够在全生命周期管理内系统化创新,从而提升数据基础设施能效。可采用创新的工艺和技术使能存储在生产加工、架构设计、行业应用等方面的协同以实现绿色节能,降低数据中心能耗与碳排放。
建设先进数据存力将是新型数据中心的重要目标,也是数字经济高质量发展的必要条件。华为数据存储将围绕先进数据存力建设持续创新,推动数据基础设施高质量发展。
好文章,需要你的鼓励
亚马逊云服务部门与OpenAI签署了一项价值380亿美元的七年协议,为ChatGPT制造商提供数十万块英伟达图形处理单元。这标志着OpenAI从研究实验室向AI行业巨头的转型,该公司已承诺投入1.4万亿美元用于基础设施建设。对于在AI时代竞争中处于劣势的亚马逊而言,这项协议证明了其构建和运营大规模数据中心网络的能力。
Meta FAIR团队发布的CWM是首个将"世界模型"概念引入代码生成的32亿参数开源模型。与传统只学习静态代码的AI不同,CWM通过学习Python执行轨迹和Docker环境交互,真正理解代码运行过程。在SWE-bench等重要测试中表现卓越,为AI编程助手的发展开辟了新方向。
当今最大的AI数据中心耗电量相当于一座小城市。美国数据中心已占全国总电力消费的4%,预计到2028年将升至12%。电力供应已成为数据中心发展的主要制约因素。核能以其清洁、全天候供电特性成为数据中心运营商的新选择。核能项目供应链复杂,需要创新的采购模式、标准化设计、早期参与和数字化工具来确保按时交付。
卡内基梅隆大学研究团队发现AI训练中的"繁荣-崩溃"现象,揭示陈旧数据蕴含丰富信息但被传统方法错误屏蔽。他们提出M2PO方法,通过改进数据筛选策略,使模型即使用256步前的陈旧数据也能达到最新数据的训练效果,准确率最高提升11.2%,为大规模异步AI训练开辟新途径。