德州大学奥斯汀分校的德州先进计算中心(TACC)即将推出Horizon AI和仿真超级计算机,它将成为世界上最大的专门用于开放科学研究的学术超级计算机。该系统将成为美国国家科学基金会(NSF)即将推出的领导级计算设施(LCCF)的旗舰产品。
Horizon是一台400 petaFLOP/s的超级计算机,与TACC现有的Frontera系统相比,将提供10倍的仿真性能提升和100倍的AI能力增长。曾经排名TOP500全球最快计算机第5位的Frontera系统使用56 PB的DDN EXAScaler Lustre存储。
VAST Data正在为Horizon提供其AI OS作为数据层。TACC表示,Horizon将拥有400PB的本地全闪存存储,"提供超过10TB/s的读写带宽以及多租户和服务质量功能"。
TACC执行董事Dan Stanzione表示:"VAST在两年多的时间里帮助我们简化了在Stampede3和Vista上管理和访问数据的方式,我们很兴奋能将这种方法扩展到Horizon,为研究人员创造更快的成果产出时间——减少数据移动时间,增加运行模型、训练AI和发布发现的时间。"
VAST Data此前在2023年7月赢得了为TACC的Stampede3超级计算机提供13 PB存储的合同,同时也为TACC的Vista系统提供存储。该公司表示,其AI OS"在Stampede3、Vista和Horizon之间提供一致的数据体验,使用户和管理员能够在容量和性能提升时延续熟悉的工作流程——帮助新社区快速上手"。
Horizon将由Ranch支持,这是一个使用Spectra Logic TFinity Plus磁带库的EB级归档系统。Spectra正在与Dell和Versity合作交付Ranch归档系统,这是Dell交付过的容量最高的归档系统之一。该系统将包含两个15框架的磁带库,配备20个LTO-9驱动器,可支持1 EB的存储容量。系统将升级以增加16个LTO-10驱动器。
Versity的ScoutAM软件归档管理系统将在13台Dell PowerEdge R760服务器上运行,自动化数据在5个Dell ME5存储阵列(构成4PB闪存层)、16 PB扩展缓存Dell ECS对象存储以及Spectra TFinity库之间的移动。
Spectra首席执行官Nathan Thompson表示:"随着Horizon设定提供10倍仿真性能改进和100倍AI能力飞跃的目标,TACC需要一个经过验证的归档解决方案来匹配其愿景和学术需求。"他说TFinity Plus系统具有"在关键任务环境中无与伦比的密度、弹性和成功记录"。
Q&A
Q1:Horizon超级计算机的性能比现有系统提升了多少?
A:Horizon是一台400 petaFLOP/s的超级计算机,与TACC现有的Frontera系统相比,将提供10倍的仿真性能提升和100倍的AI能力增长。它将成为世界上最大的专门用于开放科学研究的学术超级计算机。
Q2:Horizon的存储系统由哪些公司提供?
A:Horizon的存储系统由四家公司共同提供:VAST Data提供400PB的本地全闪存存储作为AI OS数据层;Dell提供缓存归档前端和服务器;Versity提供ScoutAM归档管理软件;Spectra Logic提供TFinity Plus磁带库作为离线存储。
Q3:Ranch归档系统的存储容量有多大?
A:Ranch是一个EB级归档系统,使用Spectra Logic TFinity Plus磁带库。系统包含两个15框架的磁带库,配备20个LTO-9驱动器,可支持1 EB的存储容量,并将升级增加16个LTO-10驱动器以进一步扩展容量。
好文章,需要你的鼓励
AI智能体必须能够在大型上下文和长期时间段内进行合作、协调和执行,Nvidia表示,这需要一种新型的基础设施,一种开放的基础设施。
这篇论文提出了CJE(因果法官评估)框架,解决了当前LLM评估中的三大致命问题:AI法官偏好倒置、置信区间失效和离线策略评估失败。通过AutoCal-R校准、SIMCal-W权重稳定和OUA不确定性推理,CJE仅用5%的专家标签就达到了99%的排名准确率,成本降低14倍,为AI评估提供了科学可靠的解决方案。
微软正式弃用Visual Studio Code编辑器的IntelliCode AI代码补全扩展,建议C#开发者改用GitHub Copilot Chat对话式AI助手。被弃用的扩展包括IntelliCode、IntelliCode Completions、IntelliCode for C# Dev Kit和IntelliCode API Usage Examples。微软建议开发者卸载相关扩展,继续使用Roslyn内置语言服务器支持或安装GitHub Copilot Chat。弃用后,开发者将不再看到代码补全列表中的星标提示和内联灰色文本建议,这些扩展也将立即停止bug修复和支持服务。
NVIDIA团队开发出Fast-FoundationStereo系统,成功解决了立体视觉AI在速度与精度之间的两难选择。通过分而治之的策略,该系统实现了超过10倍的速度提升同时保持高精度,包括知识蒸馏压缩特征提取、神经架构搜索优化成本过滤,以及结构化剪枝精简视差细化。此外,研究团队还构建了包含140万对真实图像的自动伪标注数据集,为立体视觉的实时应用开辟了新道路。