51CTO 张诚
2021年7月15-17日,Web3.0 中国峰会在成都世纪城新国际博览中心隆重举行。会上,西部数据公司副总裁兼中国区业务总经理刘钢发表了《创新存储架构 赋能分布式存储》的主题演讲,详细介绍了西部数据在分布式存储解决方案上的创新技术、优秀产品和合作案例。
西部数据公司副总裁兼中国区业务总经理刘钢
刘钢表示:“凭借行业领先的闪存和硬盘存储技术,以及纵向集成与产能上的独有优势,西部数据不断为分布式存储领域提供先进的数据存储架构和解决方案。在未来,我们将持续助力客户降低部署和运维成本,并满足高效率、大容量及节能减排等多样化需求,加速Web 3.0落地,助力‘东数西算’算力网络建设。”
存储架构变革:分布式存储成为主流趋势
在大数据、人工智能(AI)、物联网、5G 等创新技术的驱动下,各种应用与终端所生成的数据正在呈现爆发式增长的态势。与此同时,受限于存储能力、成本等因素,大量数据的价值并未得到充分挖掘。预计到2024年,快数据将达到 333EB,平均年复合增长率接近50%。大数据与快数据的总量相加约2ZB,而当年的数据总量将达到143ZB,这意味着仅有不到1.5%的数据会被存储下来。
刘钢在大会中指出,面对大数据的发展趋势,当前的企业级存储架构已经难以满足企业对于数据存储、数据分析和管理的需求,必须对存储架构进行升级改进,以创新的存储架构满足企业发展需求。
西部数据公司副总裁兼中国区业务总经理刘钢在Web3.0 中国峰会现场发表演讲
高速增长的数据、对存储性能需求的倍增、TCO成本负担增加以及更绿色能耗体系标准是当前企业存储面临的主要挑战,而去中心化的分布式存储则是解决数据存储和管理难题的最佳解决方案,也是未来存储架构的主流趋势。
从技术上来看,凭借去中心化、开放、安全性与高透明性等优势,分布式存储在数字内容发布与共享、在线影音视频、数据归档、社交媒体等场景中已经得到了广泛的应用。刘钢认为,由于分布式存储弱化了中心化存储的极致需求,节省了服务提供成本,其相比较中心化的云存储解决方案,仍旧具有明显的成本优势。
刘钢表示,随着企业数字化转型走向深水区,复杂计算、大规模计算、海量数据存储等应用给企业带来了越来越沉重的负担,存储架构从集中化、统一归属的远程集群计算向“去中心化”演进已经成为大势所趋,分布式存储即将快速兴起,成为不可替代的企业数字化转型的新动能。
以分层存储赋能,驱动分布式存储前行
面对海量的数据和不同的应用需求,数据分层存储是最佳的解决方案。通过将不同的数据存储的不同的介质上,不但能够大幅提高存储性能,加速数据分析,快速挖掘出有价值的数据,而且还能够降低数据存储的成本,使得企业的存储系统更加高效、易用、可用,真正帮助企业释放数据价值。
在刘钢看来,数据分层存储应该分为五层,即极热存储、热存储、温存储、冷存储和极冷存储。除此之外,企业还要根据数据类型的特点,将数据分为快数据、大数据两种类型,其中快数据主要用 SSD存储,而 CMR、SMR HDD主要用来存储大数据。
为了支撑分布式存储服务商创造更大的价值,西部数据基于数据分层存储理念,推出了包含丰富存储产品线的存储解决方案。该方案面向计算集群,提供了 Ultrasta DC SN640/SN840 NVMe SSD 等高性能、高稳定性的企业级SSD产品;面向存储集群,该方案提供了涵盖Ultrasta DC HC550 HDD在内的大容量硬盘产品,能够更好地优化存储集群的TCO。
在极热存储、热存储方面,西部数据推荐使用 Ultrastar DC SN640/SN840 NVMe SSD,其基于西部数据在SSD领域有着独特的技术优势,集完全自主的 NAND Flash、SSD 控制器和固件于一体。此外,西部数据还拥有第6代3D闪存技术,可以实现162层3D NAND,并采用了基于 Circuit Under Array 技术的 CMOS 和四平面运行技术,有利于性能和稳定性的提升优化。
数据显示,采用了 Circuit Under Array 技术的 CMOS 和四平面运行技术与前代相比,将应用程序的性能提高了2倍以上、读取延迟缩短 10 %、输入/输出性能提高66%。
在冷数据和极冷数据的存储上,西部数据推出了Ultrastar DC HC550 16TB、18TB大容量 CMR HDD和 Ultrastar DC HC650 20TB SMR HDD。在氦密封(HelioSeal)、叠瓦式磁记录(SMR)和能量辅助磁记录(EAMR)技术的加持之下,存储容量不但有了大幅度的提升,而且抗磁场干扰能力和写入抖动得到了很好的提升,提高了存储的使用寿命,降低了产品的功耗。
数据显示,HDD容量从14TB升级到18TB,能够减少约22%的服务器数量,节省近22%的成本。除此之外,由于每TB的功耗减少了接近21%,运营成本也大大降低。因此,采用大容量高密度硬盘,能够为企业带来更优的TCO。
刘钢表示,在西部数据针对(4U36+16TB)机柜和(4U60+18TB)机柜的对比测试中,同样空间里密度提高了近1倍,在获得更高的存储密度同时,机柜数量减少了接近一半,功耗减少约36%。因此,在采用分布式存储时,西部数据更加推荐使用18TB的高密度硬盘,以此来降低运维成本和部署成本。
“要对如此海量的数据进行存储,并充分挖掘其价值,就需要创新存储架构,引入分层存储的概念。”刘钢表示,使用高性能的存储介质来存储需要频繁访问的热数据和极热数据,使用成本与性能均衡的存储介质来存储温数据,将无需频繁访问的冷数据和极冷数据存储在大容量、低成本、性能相对较低的存储介质中,才能够真正灵活地满足不同应用场景的需求。
携手合作伙伴,共同推动分布式存储落地
在推动分布式存储快速落地上,西部数据并非单打独斗,而是选择与业界知名的合作伙伴深度合作,携手推进。会上,刘钢还详细分享了西部数据与合作伙伴的成功案例。
西部数据公司副总裁兼中国区业务总经理刘钢在Web3.0 中国峰会现场发表演讲
西部数据与杉岩数据联合打造融合了杉岩MOS海量对象存储系统,Ultrastar DC SN840/640 NVMe SSD、Ultrastar DC HC550 HDD和JBOD存储平台的解决方案。通过构建高性能、大容量、低成本、简运维的存储方案,降低了业务的总体拥有成本(TCO)、全面提升经济效益。
灵动使用西部数据的硬盘,结合分布式存储网络情况,让客户拥有更快的封装、验证、出块速度,并根据网络质量对三大网络运营商进行实时调整,自由切换,提高了客户的效益。
星辰天合(XSKY)、浪潮、西部数据三方合作,推出了分布式存储解决方案。该方案包括西部数据 Ultrastar DC HC550 18TB硬盘、浪潮英信服务器NF5466M5、XSKY文件存储系统等关键组件,不仅实现了快速部署、便捷运维,还减少了业务的异常情况带来的损失,大幅提升业务能力。
不难发现,凭借西部数据分布式存储解决方案在高性能、高密度、低成本、简运维等方面的优势,西部数据与星辰天合、杉岩数据等伙伴进行了广泛合作,推动了分布式存储方案的成功落地。
刘钢表示,分布式存储有望进一步发挥在灵活性、敏捷性、开放性等方面的优势,成为数字化世界构建的重要基础平台之一。西部数据将发挥所拥有的领先技术、定制化服务及解决方案优势,并携手各界的业务合作伙伴,共同推动分布式存储的落地与价值挖掘,更好地加速Web3.0落地。
好文章,需要你的鼓励
Blackwell GPU的生产制造工作量达到Hopper GPU的两倍有余,但带来的收入仅增加至约1.7倍。
由AMD驱动的El Capitan超级计算机(现位于美国劳伦斯利弗莫尔国家实验室(LLNL))成为世界上速度最快的超级计算机。