微软公司称自身为全球最大的磁带存储用户,但希望拥有更快的替代方案以支持人工智能数据。
微软公司目前正在为其Azure云服务开发一类新的基于磁盘的存储方案,旨在为部分磁带运作速度缓慢的情况提供补充性支持。
Azure首席技术官Mark Russinovich日前在澳大利亚悉尼的一次会议当中表示,微软公司已经部署有磁带库为Azure归档服务提供支持,但表示“我们对此并不满意”。Russinovich展示了一张IBM TS3500磁带库的幻灯片,并表示“我们认为从存储成本与访问延迟的角度来看,磁带的成本其实并不算太低,但仍然比磁盘要好一点。”
他同时补充称,“我们之所以加大这方面的投资,是因为磁带驱动器相当昂贵,且需要在数据中心之内建立特殊的配套基础设施。”
微软的回应被称为Pelican项目,旨在提供一套装有1152块10 TB、3.5英寸磁盘的机架,其原始容量为11.5 PB。
Russinovich表示,Pelican在设计当中还包含数台服务器。“其独特之处在于,所有磁盘不会同时运转。在进行数据访问时,服务器将对各驱动器进行加速,从而以极低的功率存储海量数据。”此外,由于数据被存储在磁盘之上,因此其访问速度与磁带相比拥有明确的优势。
微软展示的Pelican项目幻灯片
根据Russinovich的介绍,Pelican项目更像是一种闲置磁盘阵列(简称MAID)。这项技术于2010年遭遇到困境,其主要推动者COPAN公司决定退出市场并接受SGI的收购。
新旧设备对比。
也许Pelican项目可以视为一种MAID的升级版本。当然,Russinovich没有明确表示Pelican项目的正式完成时间或者是否会得到全面采用。但他明确将其定位为微软公司现有云存储硬件的继承者。他同时表示Pelican与Azure Archive Storage非常适合为人工智能模型所必需的大量数据提供存储资源。Russinovich表示,目前企业一般不会广泛保留全部人工智能相关数据。微软公司希望能够凭借新项目与相关存储服务,鼓励客户坚持保留所有数据并付费实现永久保存。
此外,Russinovich还表示之所以推出Pelican项目,是因为一部分Azure数据中心还没有做好容纳磁带库的准备。在这样的情况下,Pelican这种基于磁盘的解决方案显然更具竞争力与可行性。
这位CTO并没有明确提到Azure未来会放弃磁带,因此IBM的存储团队暂时不必为此担心。但他确实指出,磁带存在着严重的局限性,而微软还需要另一种存储层。更重要的是,微软公司在尚未正式投入生产的情况下就已经全面讨论Pelican项目——这也许是受到了人工智能相关需求的推动。
Russinovich还指出,微软公司已经为部分Azure数据中心引入了实验性现场天然气发电机。发电机供电将用于支持基础设施的电池组,他表示其效率要高于直接使用当地电网的电力资源。
好文章,需要你的鼓励
清华大学团队突破性开发"零样本量化"技术,让AI模型在不接触真实数据的情况下完成高效压缩,性能反超传统方法1.7%,为隐私保护时代的AI部署开辟新路径。
普林斯顿大学研究团队开发出"LLM经济学家"框架,首次让AI学会为虚拟社会制定税收政策。系统包含基于真实人口数据的工人AI和规划者AI两层,通过自然语言交互找到最优经济政策,甚至能模拟民主投票。实验显示AI制定的税收方案接近理论最优解,为AI参与社会治理提供了新路径。
K Prize是由Databricks和Perplexity联合创始人推出的AI编程挑战赛,首轮比赛结果显示,获胜者巴西工程师Eduardo Rocha de Andrade仅答对7.5%的题目就获得5万美元奖金。该测试基于GitHub真实问题,采用定时提交系统防止针对性训练,与SWE-Bench 75%的最高得分形成鲜明对比。创始人承诺向首个在该测试中得分超过90%的开源模型提供100万美元奖励。
南开大学研究团队提出了一种新的3D高斯泼溅重光照方法,通过在高斯原语上直接编码离散化SDF值,避免了传统方法需要额外SDF网络的问题。该方法设计了投影一致性损失来约束离散SDF样本,并采用球形初始化避免局部最优。实验表明,新方法在保持高质量重光照效果的同时,仅需现有方法20%的显存,显著提升了训练和渲染效率。