PEAK:AIO 推出了一款新的 2RU 1.5 PB AI 数据服务器产品,采用 Dell 硬件,数据传输速度可达 120 GBps。
PEAK:AIO 是一家专注于 AI 领域的英国存储初创公司,该公司在第三方硬件上提供软件定义存储解决方案,通过严格的管理和控制来降低延迟并提高吞吐量。其 2RU 服务器此前使用 NFS 和 NVMe-oF 为中型 GPU 集群提供 40 GBps 的传输速度,现在速度提升了三倍。
新硬件采用了 Solidigm 的 61.44 TB QLC SSD,数据通过 Nvidia 的 CX7 以太网 NIC 传输。PEAK:AIO 表示,医疗保健和研究等特殊领域需要与大型数据中心基础设施系统所产生的相同的高速生成式 AI 模型能力。该公司称其系统成本更低,但仍然保持很高的速度和能源效率。PEAK 表示,他们有一个新的 NVMe 软件栈,"消除了传统 Linux 瓶颈",为数据密集型 AI 应用提供更好的性能。
联合创始人兼首席战略官 Mark Klarzynski 表示:"我们的方案解决了 AI 基础设施两端的需求。对于较小的创新项目,这款 2U 解决方案在紧凑的形态中提供了无与伦比的性能和能源效率。对于大规模部署,它成为新一代横向扩展文件系统的基础,专门用于满足现代 GPU 的能源和性能需求。"
CX7 需要 PCIe Gen 5 总线,最大传输速度为 50 GBps。据了解,Dell PowerEdge R7625 机架服务器采用 2RU 机箱,最多支持八个 PCIe gen5 插槽。三个单端口 CX7,每个使用 PCIe gen5 x 16 通道插槽,可提供 120 GBps 的传输速度。R760 最多支持 24 个 NVMe SSD,使用 61.44 TB Solidigm SSD 填满这些插槽可提供 1.5 PB 的原始容量。
Klarzynski 告诉我们:"Dell Technologies 专门为我们验证了 Solidigm 的 61TB NVMe 驱动器和 NVIDIA 的 400Gb 加密接口在 R7625 上的性能,超过了主流的 15TB 解决方案。这一举措突显了我们的规模和全球野心。我们的 2U AI 数据服务器 (1.5PB, 120GB/sec) 为效率树立了新的行业标准。"
AI 数据服务器可以直接连接到 Nvidia GPU 服务器,用于小型或新创项目,通过添加交换机可以连接多达 10 个 GPU 服务器。数据服务器可以横向扩展以支持更多 GPU。
PEAK 表示,该公司在 2023 年和 2024 年实现了 400% 的增长,主要来自美国市场,并计划在今年晚些时候推出新的产品系列,以补充其新的 AI 数据服务器,"在 Dell Technologies 的支持下...将突破能源、散热和密度方面的挑战。"该公司还将推出与 CX7 集成的线速加密卸载功能。
好文章,需要你的鼓励
本文比较了谷歌“铁木” TPU Pod 与传统HPC系统(如“El Capitan”和“Aurora”)在性能和成本上的表现。文章指出,尽管设计目标不同,但美国能源部通过优惠合作,实现了更优的性价比,而谷歌的比较存在误导。
斯坦福大学推出 AI4MH 项目,聚焦利用生成式 AI 改革心理健康诊断与治疗,探讨现有体系不足及未来发展。
在期末之际,OpenAI和谷歌向学生免费提供AI工具:前者短期内开放ChatGPT Plus,后者长期提供Google One AI Premium套件,助力高校数字化转型。
Together AI 最新升级其微调平台,支持浏览器零代码操作、直接偏好优化、续接先前训练任务并调整消息权重,同时新定价更低廉,旨在简化AI模型持续迭代。