5月23日-24日,2023创新数据基础设施论坛在德国慕尼黑举办。本届论坛以“新应用、新数据、新韧性”为主题,来自全球的行业专家、合作伙伴等嘉宾,共同就YB数据时代下的数据基础设施建设展开探讨。会上,华为全面阐述了拥抱新兴应用生态、高效处理海量非结构化数据、全面提升数据韧性等数据存储产业演进方向,助力企业释放数据价值。

华为公司副总裁、数据存储产品线总裁周跃峰博士发言
华为认为,随着数字化转型的深入,数据存储产业正在迎来巨大的变革和发展机会:
首先,数据应用日新月异,56%的企业都在部署AI应用;同时96%的企业计划构建云原生应用。
其次,数据爆炸式增长,80%新增的数据为非结构化数据,年复合增长率达到38%。
最后,数据韧性挑战日益严峻,勒索病毒变种快,同比增加98%,而且14.1%的企业遭受勒索攻击后数据无法恢复。
新兴的大数据、AI应用对多样化数据并行处理提出更高要求,数据存储和数据应用之间的分工协作模型正在重新构建,新的数据范式时代正在到来。云原生应用将越来越多地引入到企业数据中心,为此,高性能、高可靠的容器存储成为必需。
非结构化数据正在进入企业生产决策系统,实时的访问让数据热度不断提升,分布式存储的读写带宽和IO访问效率需要得到数量级的提升。同时,分布式存储需要在软件、算法以及硬件方面通过系统性创新,满足海量非结构化数据对极致成本效益的要求。此外,数据规模的增长带来严重的数据重力问题,需要构建智能的数据编织能力,实现跨系统、跨地域、跨云的全局统一数据视图和调度。
数据安全威胁正在从自然灾害、物理损坏向勒索软件等人为攻击转变,企业需要从被动响应走向主动防御,提升数据韧性。零日漏洞的增加、数据无法恢复带来的巨大损失,使得以网络、应用、主机安全构成的企业数据安全体系不足以满足企业最新的数据韧性需求。数据存储正在成为守护数据安全的最后一道防线,更多的数据韧性能力将被内嵌到数据存储产品中,例如勒索检测、数据加密、安全快照和AirGap隔离区恢复特征等。
华为公司副总裁、数据存储产品线总裁周跃峰指出,华为数据存储携手客户与伙伴共同成长,提供丰富的产品与解决方案,其中OceanStor Dorado全闪存存储和OceanStor Pacific分布式存储均荣获2023 Gartner Peer Insights™客户之选。
纵观全球整个数据存储产业,2022年全球前五名外置存储厂商发货容量是2012年的3倍,相比于正在迎来的YB数据时代,这还远远不够。华为预测2032年这一数字将实现10倍增长,超过100EB。数据存储在不断追求大容量、高性能的同时,还需要通过构建新的数据范式、智能的数据编织、内生的数据韧性,助力企业释放海量数据价值,也使能数据存储产业的飞速发展。
好文章,需要你的鼓励
亚马逊云服务部门与OpenAI签署了一项价值380亿美元的七年协议,为ChatGPT制造商提供数十万块英伟达图形处理单元。这标志着OpenAI从研究实验室向AI行业巨头的转型,该公司已承诺投入1.4万亿美元用于基础设施建设。对于在AI时代竞争中处于劣势的亚马逊而言,这项协议证明了其构建和运营大规模数据中心网络的能力。
Meta FAIR团队发布的CWM是首个将"世界模型"概念引入代码生成的32亿参数开源模型。与传统只学习静态代码的AI不同,CWM通过学习Python执行轨迹和Docker环境交互,真正理解代码运行过程。在SWE-bench等重要测试中表现卓越,为AI编程助手的发展开辟了新方向。
当今最大的AI数据中心耗电量相当于一座小城市。美国数据中心已占全国总电力消费的4%,预计到2028年将升至12%。电力供应已成为数据中心发展的主要制约因素。核能以其清洁、全天候供电特性成为数据中心运营商的新选择。核能项目供应链复杂,需要创新的采购模式、标准化设计、早期参与和数字化工具来确保按时交付。
卡内基梅隆大学研究团队发现AI训练中的"繁荣-崩溃"现象,揭示陈旧数据蕴含丰富信息但被传统方法错误屏蔽。他们提出M2PO方法,通过改进数据筛选策略,使模型即使用256步前的陈旧数据也能达到最新数据的训练效果,准确率最高提升11.2%,为大规模异步AI训练开辟新途径。