PEAK:AIO 推出了一款新的 2RU 1.5 PB AI 数据服务器产品,采用 Dell 硬件,数据传输速度可达 120 GBps。
PEAK:AIO 是一家专注于 AI 领域的英国存储初创公司,该公司在第三方硬件上提供软件定义存储解决方案,通过严格的管理和控制来降低延迟并提高吞吐量。其 2RU 服务器此前使用 NFS 和 NVMe-oF 为中型 GPU 集群提供 40 GBps 的传输速度,现在速度提升了三倍。
新硬件采用了 Solidigm 的 61.44 TB QLC SSD,数据通过 Nvidia 的 CX7 以太网 NIC 传输。PEAK:AIO 表示,医疗保健和研究等特殊领域需要与大型数据中心基础设施系统所产生的相同的高速生成式 AI 模型能力。该公司称其系统成本更低,但仍然保持很高的速度和能源效率。PEAK 表示,他们有一个新的 NVMe 软件栈,"消除了传统 Linux 瓶颈",为数据密集型 AI 应用提供更好的性能。
联合创始人兼首席战略官 Mark Klarzynski 表示:"我们的方案解决了 AI 基础设施两端的需求。对于较小的创新项目,这款 2U 解决方案在紧凑的形态中提供了无与伦比的性能和能源效率。对于大规模部署,它成为新一代横向扩展文件系统的基础,专门用于满足现代 GPU 的能源和性能需求。"
CX7 需要 PCIe Gen 5 总线,最大传输速度为 50 GBps。据了解,Dell PowerEdge R7625 机架服务器采用 2RU 机箱,最多支持八个 PCIe gen5 插槽。三个单端口 CX7,每个使用 PCIe gen5 x 16 通道插槽,可提供 120 GBps 的传输速度。R760 最多支持 24 个 NVMe SSD,使用 61.44 TB Solidigm SSD 填满这些插槽可提供 1.5 PB 的原始容量。
Klarzynski 告诉我们:"Dell Technologies 专门为我们验证了 Solidigm 的 61TB NVMe 驱动器和 NVIDIA 的 400Gb 加密接口在 R7625 上的性能,超过了主流的 15TB 解决方案。这一举措突显了我们的规模和全球野心。我们的 2U AI 数据服务器 (1.5PB, 120GB/sec) 为效率树立了新的行业标准。"
AI 数据服务器可以直接连接到 Nvidia GPU 服务器,用于小型或新创项目,通过添加交换机可以连接多达 10 个 GPU 服务器。数据服务器可以横向扩展以支持更多 GPU。
PEAK 表示,该公司在 2023 年和 2024 年实现了 400% 的增长,主要来自美国市场,并计划在今年晚些时候推出新的产品系列,以补充其新的 AI 数据服务器,"在 Dell Technologies 的支持下...将突破能源、散热和密度方面的挑战。"该公司还将推出与 CX7 集成的线速加密卸载功能。
好文章,需要你的鼓励
很多人担心被AI取代,陷入无意义感。按照杨元庆的思路,其实无论是模型的打造者,还是模型的使用者,都不该把AI放在人的对立面。
MIT研究团队提出递归语言模型(RLM),通过将长文本存储在外部编程环境中,让AI能够编写代码来探索和分解文本,并递归调用自身处理子任务。该方法成功处理了比传统模型大两个数量级的文本长度,在多项长文本任务上显著优于现有方法,同时保持了相当的成本效率,为AI处理超长文本提供了全新解决方案。
谷歌宣布对Gmail进行重大升级,全面集成Gemini AI功能,将其转变为"个人主动式收件箱助手"。新功能包括AI收件箱视图,可按优先级自动分组邮件;"帮我快速了解"功能提供邮件活动摘要;扩展"帮我写邮件"工具至所有用户;支持复杂问题查询如"我的航班何时降落"。部分功能免费提供,高级功能需付费订阅。谷歌强调用户数据安全,邮件内容不会用于训练公共AI模型。
华为研究团队推出SWE-Lego框架,通过混合数据集、改进监督学习和测试时扩展三大创新,让8B参数AI模型在代码自动修复任务上击败32B对手。该系统在SWE-bench Verified测试中达到42.2%成功率,加上扩展技术后提升至49.6%,证明了精巧方法设计胜过简单规模扩展的技术理念。