NetApp本周发布了其基于对象的存储平台StorageGRID第12版本,该公司表示此次更新将显著改善AI工作负载的扩展性,同时先进的缓存技术将使训练和高性能计算工作负载的性能提升20倍。
客户现在可以通过存储桶分支对AI数据集进行版本管理,并支持"为工作流程创建对象存储桶的空间高效克隆"。NetApp表示,这些空间高效的克隆还将实现更快的故障恢复。其他弹性功能包括"增强的加密标准,采用AES GCM加密并添加完整性检查、更强的磁盘加密以及SSH端口的默认阻止"。跨网格复制中的对象锁定支持使AI的不可变数据集更易于管理。
毫不意外,NetApp强烈倡导将对象存储作为大规模维护AI内容存储库的解决方案。产品管理总监Vishnu Vardhan在发布公告的博客中写道:"这些数据集极其庞大,客户通常有多个开发团队并行处理这些数据集。AI工作流程的这一部分迫切需要一个简单且可扩展的解决方案。"
但传统工具要么无法扩展,要么改变数据格式,或者改变应用程序与存储的交互方式。StorageGRID现在允许开发人员"即时复制包含数十亿个对象和PB级容量的大型存储桶,独立操作这些存储桶,并协调存储桶之间的变更"。
Vardhan写道,集成缓存将简化AI工作流程中缓存的使用,加强安全性并提供一致性。这将提供"比当前NetApp StorageGRID设备高10倍的性能"。通过在裸机StorageGRID节点上运行缓存层,性能还可以进一步提升。
Vardhan补充说,StorageGRID的"发布限制"已经翻倍,该平台现在可以在单个全尺寸StorageGrid集群中支持超过6000亿个对象。
在最新的财报中,NetApp首席执行官George Kurian表示,公司在最近一个季度获得了125个AI项目胜利,相比一年前的50个有显著增长,并暗示在超大规模AI市场取得了进展。
NetApp发布这一消息的同一天,三名NetApp资深员工加入了VAST Data,包括前首席技术官兼高级副总裁Jonsi Stefansson,他们在离开前雇主仅几个月后就出现在新东家。
现任VAST云解决方案总经理的Stefansson在声明中说:"在与VAST的竞争中败北的次数比我愿意承认的要多,我从外部就知道VAST的架构有多么强大和独特——它远不止是一个文件系统或简单的存储操作系统。"
Q&A
Q1:StorageGRID 12版本有哪些主要改进?
A:StorageGRID 12版本主要改进包括:AI工作负载扩展性显著提升,先进缓存技术使训练和高性能计算性能提升20倍,支持存储桶分支进行AI数据集版本管理,提供空间高效的对象存储桶克隆功能,以及增强的加密标准和安全性。
Q2:什么是空间高效克隆功能?
A:空间高效克隆是StorageGRID 12的核心功能,允许开发人员即时复制包含数十亿个对象和PB级容量的大型存储桶,各个存储桶可以独立操作,并能协调存储桶之间的变更。这项技术还能实现更快的故障恢复。
Q3:NetApp在AI市场表现如何?
A:根据NetApp最新财报,公司在AI市场表现强劲。最近一个季度获得了125个AI项目胜利,相比一年前的50个有显著增长,并在超大规模AI市场取得进展,显示出其在AI存储解决方案领域的竞争优势。
好文章,需要你的鼓励
存储扩展专家Lucidity将其AutoScaler平台扩展至Kubernetes容器编排平台,帮助企业控制存储支出。该公司表示,Kubernetes中的持久卷常常成为隐形浪费源,虽然Kubernetes可自动扩展实例数量,但底层存储通常未被充分利用。新服务可为亚马逊EKS提供持久卷的自动扩缩容,声称可为客户节省高达70%的云块存储费用。
腾讯ARC实验室推出AudioStory系统,首次实现AI根据复杂指令创作完整长篇音频故事。该系统结合大语言模型的叙事推理能力与音频生成技术,通过交错式推理生成、解耦桥接机制和渐进式训练,能够将复杂指令分解为连续音频场景并保持整体连贯性。在AudioStory-10K基准测试中表现优异,为AI音频创作开辟新方向。
超过1.8万Spotify用户加入名为"Unwrapped"的集体组织,通过去中心化数据平台Vana将个人听歌数据打包出售给AI开发者。该组织已将1万用户的艺术家偏好数据以5.5万美元价格售出,用于构建新型流媒体数据分析工具。Spotify对此发出警告,称该行为违反开发者政策和商标权,禁止将平台数据用于机器学习模型构建。但Unwrapped团队坚持用户拥有控制和变现个人数据的权利,双方就数据所有权展开争议。
Meta与特拉维夫大学联合研发的VideoJAM技术,通过让AI同时学习外观和运动信息,显著解决了当前视频生成模型中动作不连贯、违反物理定律的核心问题。该技术仅需添加两个线性层就能大幅提升运动质量,在多项测试中超越包括Sora在内的商业模型,为AI视频生成的实用化应用奠定了重要基础。