2014年8月19日中国国际大数据大会在北京国宾酒店举行,在高峰论坛上希捷科技全球副总裁暨中国区总裁孙丹做了题为《大数据与云存储》的讲演。围绕着硬盘的成本问题、数据存储的按需定制和云存储如何智慧使用进行的阐述。
孙丹
硬盘成本是大问题
对于数据中心的成本其中网络设备占了8%,供电和制冷占了31%,而服务器和存储则占了57%,而在服务器和存储的成本中硬盘则占了50%以上。Google有一千万个硬盘在线,BAT每年的采购量达到了200万个,而百度、腾讯和阿里每年也要采购100万个以上的硬盘。因此硬盘有一个巨大的成本,那如何节约硬盘的成本是一个大问题。
同时硬盘在使用的过程中浪费巨大,很多硬盘的用户认为硬盘是坏的,将硬盘在服务器中拔掉返回给厂家,而在返还的这些硬盘中事实上20%的硬盘是好的,造成了巨大的浪费。
数据存储按需定制
数据本身是分层的,不同的数据选择不同的存储,因此数据要智能的选择存储。数据本身可以分为热数据、温数据、冷数据和冰数据。热数据包括及时社交、在线交易、在线游戏和搜索引擎,这类数据最好是用企业级固态硬盘。温数据包括在线视频、在线杀毒和社交网站,这类数据适用希捷企业级10K或15K超能盘。冷数据包括电子邮箱、数据库、云空间和商品库,这类数据适用希捷企业级2.5寸或3.5寸海量盘。冰数据包括图片备份、商品信息保存和用户资料存储,这类数据适用希捷扩容硬盘或希捷归档硬盘。
同时希捷针对大数据推出一种新的架构即Kinetic开放式存储平台,真正的基于云计算的简化结构同时符合计算和存储分离的趋势,此架构将硬盘直接与以太网相连以简化存储结构同时提高密度,大大提高效率。
智能云存储-智慧使用
节省功耗是很多企业十分关心的问题,如百度、阿里等最关心的就是如何省电,因为在他们的数据中心里最大的费用就是电费。希捷硬盘里有一项技术叫PowerChoice能够做到节省50%的电。
系统中对于硬盘有很多错误的报送,造成用户误以为硬盘是坏的,为此希捷的硬盘提供一种叫No Trouble Found服务,降低系统对硬盘的错误报送,进而减少更换硬盘的成本。
同时希捷硬盘还提供在线诊断服务减少系统宕机造成的损失。希捷的Fsat RAID Rebliud技术能够降低磁盘阵列重构的时间成本。
好文章,需要你的鼓励
Allen AI研究所联合多家顶尖机构推出SAGE智能视频分析系统,首次实现类人化的"任意时长推理"能力。该系统能根据问题复杂程度灵活调整分析策略,配备六种智能工具进行协同分析,在处理10分钟以上视频时准确率提升8.2%。研究团队创建了包含1744个真实娱乐视频问题的SAGE-Bench评估平台,并采用创新的AI生成训练数据方法,为视频AI技术的实际应用开辟了新路径。
联想推出新一代NVMe存储解决方案DE6600系列,包含全闪存DE6600F和混合存储DE6600H两款型号。该系列产品延迟低于100微秒,支持多种连接协议,2U机架可容纳24块NVMe驱动器。容量可从367TB扩展至1.798PiB全闪存或7.741PiB混合配置,适用于AI、高性能计算、实时分析等场景,并配备双活控制器和XClarity统一管理平台。
中科院团队首次系统评估了AI视觉模型在文本压缩环境下的理解能力,发现虽然AI能准确识别压缩图像中的文字,但在理解深层含义、建立关联推理方面表现不佳。研究通过VTCBench测试系统揭示了AI存在"位置偏差"等问题,为视觉文本压缩技术的改进指明方向。