科技行者

行者学院 转型私董会 科技行者专题报道 网红大战科技行者

知识库

知识库 安全导航

至顶网存储频道增长非结构,化解“效”为先

增长非结构,化解“效”为先

  • 扫一扫
    分享文章到微信

  • 扫一扫
    关注官方公众号
    至顶头条

高效率的在线存储、有效的数据保护,以合理的方式交付,是存储基础设施永恒的话题。但是,在所创造的信息量已超过可用存储容量、非结构化数据占据主导的今天,用户实际面临的挑战,有了很大的变化……

作者:存储时代——Gelada 来源:ZDNet China【原创】 2010年8月12日

关键字: IEEE 重复数据删除 IIS IaaS

  • 评论
  • 分享微博
  • 分享邮件

在本页阅读全文(共2页)

“别无选择”固然让人不舒服,可“选择太多”也未必就是好事。有趣的是,这两种极端情况还经常结伴出现。

譬如说,在信息化的道路上,现代企业只能一路狂奔,别无选择,否则就会被竞争对手越甩越远,直至淘汰出局。而在信息化的具体实现上,又有着太多的解决方案可供选择,但究竟哪些才真正适合你的企业?总不能试过才知道……

没有人可以代替用户去做选择,用户需要的是明确自身的需求,并以此为衡量标准,穿透厂商宣传的迷雾,找到真正适合的解决方案。

具体到存储而言,用户的根本需求其实很简单,无非是如何处理活跃数据、管理不活跃却需要长期保存的数据,让数据更好地为业务服务,以及……尽可能的降低成本。

不过,这些看似简单的基本需求,必须结合着不断发展变化的商业环境来考量。看看我们所处的这个时代吧,相信大多数人都能够感受到,经过十几年的快速发展,互联网已经渗透到我们生活的每一个角落,并正在将整个地球联结为一个整体。总的来说,这是件好事,但也对存储技术提出了重大的挑战。

增长非结构,化解“效”为先

IDC今年公布的“数字宇宙”调查,2009年总容量0.8ZB,2020年将达到35.2ZB,增长44倍

先来看看下面这样一组数字:

每天产生的数据大约15PB
预计全球的数据年增长率高达50-100%
估计今天80%的数据是非结构化的,如电子邮件、图像、音频和视频
对新存储的需求在过去十年增长了69倍
到2011年,50%的数字宇宙(地球上创建、捕捉、传送或复制的信息总和)就将超过可用的存储

也许你会觉得最后一条有些耸人听闻,但是,来自于不同研究机构的报告,都提醒我们注意以下两个基本事实:

数字信息的产生速度明显超过存储容量的增长速度,也就是说,存储容量不够用了;
非结构化数据是数字信息增长的主力军,同时也是数字宇宙的主体。

其实,即使没研读过那些报告,看看身边人手一个(乃至几个)的手机、相机,随处可见的笔记本电脑、iPhone、iPad,不难想见,每时每刻有多少非结构化数据被创造出来,并以怎样的速度在传播。

也许有人会说,这些都是个人数据,与企业有什么关系?想想那些放在开心网、Flickr上的相册吧……正如IDC所言,“超过70%的数字宇宙由个人产生。但是企业需要负责存储、保护和管理数字宇宙的80%。由于社交网络和Web 2.0技术不断渗透到企业,企业的责任将有增无减。”

在线数据要效率

应对在线数据的快速增长,需要存储系统具有很强的扩展能力——不仅是容量,性能也要随之增长,横向扩展(Scale-out)架构能很好地满足这一要求。理论上说,NAS更适合保存非结构化数据,可基于块的存储设备目前仍是市场主流。要点是横向扩展的架构,具体要SAN还是NAS,取决于用户的需求。

相比之下,结构化数据的增长没有非结构化数据那么快,但容量本来也不是它最迫切需要解决的问题。数据库是最典型的结构化数据,存储系统使用大量的硬盘驱动器,不是为了提高容量,而是把磁盘访问分散到尽可能多的驱动器上,提高数据库的I/O性能(IOPS)。

IOPS性能比硬盘驱动器至少高一个数量级的固态盘(SSD)可以解决结构化数据的性能难题,但是其高昂的价格和偏低的容量成为了扩大用户接受度的障碍。依照“好钢用在刀刃上”的古训,把最需要IOPS性能的数据(如数据库的日志文件)放在SSD上,可以最小的投入换取最大的产出,不过也需要用户具有很强的存储规划和管理能力。因此,应用子卷级的自动分层存储技术,让存储系统根据数据的访问频度和性能要求,自动地将需要高IOPS的数据迁移到SSD上,而无须用户的干预。有数据表明,在子卷级自动分层存储技术的帮助下,传统的高端存储系统可以用大约10%的SSD,获得300%的性能提升。

回过头来再说容量。对主存储而言,关键是提高容量的利用率。自动精简配置技术为应用分配其真正需要的数据存储容量,只有在应用写入数据的时候才会消耗实际的存储空间,而在数据被删除之后亦可回收原来占用的存储空间,避免了传统存储空间分配方式的浪费现象,能够成倍地提高存储容量的利用率,缓解可用存储容量不足的问题。

    • 评论
    • 分享微博
    • 分享邮件
    邮件订阅

    如果您非常迫切的想了解IT领域最新产品与技术信息,那么订阅至顶网技术邮件将是您的最佳途径之一。

    重磅专题
    往期文章
    最新文章