谷歌公司推为非必要数据推出的检索服务——也就是Nearline——拥有三秒左右的检索延迟,这样的结果实在令人有些惊讶。考虑到Nearline与Amazon的Glacier服务保持着基本一致的使用成本,我们不禁要问:谷歌公司是如何在成本不变的前提下,将后者高达3至5小时的磁带检索延迟压缩至3秒钟的?
磁带的成本确实很低——但速度也相当慢,而谷歌公司肯定没办法利用它让Nearline拥有如此出色的延迟水平。我们认为,Nearline使用的应该是蓝光碟片驱动器或者传统机械硬盘,并通过一系列调整来尽可能降低成本。
谷歌公司指出,其使用的是现有闪存与磁盘基础设施。谷歌云平台业务产品管理负责人Tom Kershaw表示:“我们希望能够维持单一堆栈,因为只有这样才能实现内容的可替代性……因此,我们需要有能力以无缝化方式在不同存储体系之间实现数据迁移,而一旦创建出彼此独立的设备农场,那么数据迁移将变得非常困难。”
“众所周知,在存储领域,存储本身的成本并不高,真正昂贵的是数据移动过程。因此我们在自己的基础设施之上利用软件方式实现差异化,但其底层磁盘与闪存仍然是完全一致的,”Kershaw解释道。
“因为我们拥有如此庞大的存储容量规模,所以如果我们将Nearline存储服务承载在其它类型的系统之上,就会失去规模化带来的经济优势,”他进一步补充称。
不过底层磁盘与闪存的一致性这种说法在我们看来并不太靠谱,而谷歌公司提到的在不同存储类型之间进行数据移动的说法,则让我们想到其肯定是将其它存储介质引入到了现有磁盘及闪存基础设施当中。
这绝对不是在变更客户数据集存储策略时所必须采取的元数据调整。
如果谷歌方面真的是在使用光盘存储来支持Nearline存储服务,那么其并不应该被归类到现有磁盘及闪存基础设施的组成部分当中。此外,从存储库中的离线蓝光光盘当中进行数据检索,其执行时间一般会大于三秒。因此,蓝光光盘的可能性已经基本被排除了——再见。
因此,到底是什么因素让磁盘存储在谷歌的Nearline服务当中大放异彩,但却又无法在几年前的Amazon磁带存储服务Glacier当中起效?
我们能够看到的有两点:叠瓦式磁记录(简称SMR)技术与氦气填充磁盘驱动器,这两大技术成果都能显著提高磁盘产品的存储容量。
今年6月,HGST公司公布了其He10 10TB叠瓦式驱动器。
希捷公司则拥有一款空气填充式8 TB叠瓦驱动器,其存储碟片容量能力比HGST的10 TB磁盘要少一张。HGST公司的叠瓦产品属于主机管理型而非驱动器管理型,因此要使用它必须对主机服务器上的应用软件作出变更。
谷歌公司如果希望拥有高效的驱动器存储方案,那么肯定不会选择这样劳力神伤的方式。
然而,HGST公司表示其一直在与PMC-Sierra以及Avago-LSI等厂商协作实现HBA支持。如果这项支持尚未准备就绪,那么谷歌公司肯定会面临问题——除非其先于其它厂商拿到了这项HBA技术。又或者,谷歌方面可能会利用希捷推出的SMR磁盘驱动器——其存储容量更低(6到8TB),但不需要对主机服务器软件作出变更。
综上所述,我们认为谷歌公司很可能在其Nearline存储服务当中使用了SMR磁盘驱动器——具体选项有二,HGST的氦气填充式驱动器容量价格比更出色,而希捷方面的产品更易于部署、但在容量价格比方面则略逊一筹。
好文章,需要你的鼓励
Docker公司通过增强的compose框架和新基础设施工具,将自己定位为AI智能体开发的核心编排平台。该平台在compose规范中新增"models"元素,允许开发者在同一YAML文件中定义AI智能体、大语言模型和工具。支持LangGraph、CrewAI等多个AI框架,提供Docker Offload服务访问NVIDIA L4 GPU,并与谷歌云、微软Azure建立合作。通过MCP网关提供企业级安全隔离,解决了企业AI项目从概念验证到生产部署的断层问题。
中科院联合字节跳动开发全新AI评测基准TreeBench,揭示当前最先进模型在复杂视觉推理上的重大缺陷。即使OpenAI o3也仅获得54.87%分数。研究团队同时提出TreeVGR训练方法,通过要求AI同时给出答案和精确定位,实现真正可追溯的视觉推理,为构建更透明可信的AI系统开辟新路径。
马斯克的AI女友"Ani"引爆全球,腾讯RLVER框架突破情感理解边界:AI下半场竞争核心已转向对人性的精准把握。当技术学会共情,虚拟陪伴不再停留于脚本应答,而是通过"心与心的循环"真正理解人类孤独——这背后是强化学习算法与思考模式的化学反应,让AI从解决问题转向拥抱情感。
PyVision是上海AI实验室开发的革命性视觉推理框架,让AI系统能够根据具体问题动态创造Python工具,而非依赖预设工具集。通过多轮交互机制,PyVision在多项基准测试中实现显著性能提升,其中在符号视觉任务上提升达31.1%。该框架展现了从"工具使用者"到"工具创造者"的AI能力跃迁,为通用人工智能的发展开辟了新路径。