近日,深圳市杉岩数据技术有限公司自主研发设计的去中心化企业级存储产品——分布式存储系统获得了鲲鹏Validated认证。
在双方联合的解决方案中,基于华为鲲鹏底座的杉岩分布式存储系统,通过优化对象存储RGW在写对象时的MD5计算过程,最大化CPU处理RGW进程的能力,发挥硬件最大性能;杉岩数据联合华为Openlab实验室,使用鲲鹏920处理器MD5加速引擎,计算MD5校验,提升对象存储服务写带宽性能达到17%以上。
杉岩分布式存储系统通过文件访问、块接口和对象访问接口,对外同时支持NFS协议、iSCSI协议、CIFS协议和S3协议,进而同时兼容VMWare、OpenStack、Hyper-V、容器平台和内容管理、视频监控、数据分析、金融影像、备份归档等多种非结构化应用需求,有效解决复杂环境下的IT业务数据管理需求。
在联合解决方案特性实践中,杉岩分布式存储系统针对鲲鹏多核架构进行指令集优化,并启用鲲鹏920处理器MD5加速引擎,通过CPU绑核和配置NUMA亲和性等调优技术,分布式存储系统读、写性能提升明显:
对象存储写场景,512K workload下,RGW单节点调优前后性能提升20.13%。
对象存储写场景,512K workload下,RGW三节点,Bcache优化前后提升39.44%,应用KAE MD5硬件和BoosKit加速后性能提升17.65%。
杉岩数据2019年就完成了基于华为鲲鹏和TaiShan服务器的适配、移植和调优,今年又成为openEuler社区的成员,与鲲鹏生态进入深度合作阶段。未来,杉岩数据将与鲲鹏生态展开更广泛的技术合作和联合方案创新,为各行业客户提供高性能、高可靠的数据存储解决方案。
好文章,需要你的鼓励
南洋理工大学研究团队开发了WorldMem框架,首次让AI拥有真正的长期记忆能力,解决了虚拟世界模拟中的一致性问题。该系统通过记忆银行存储历史场景,并使用智能检索机制,让AI能准确重现之前的场景和事件,即使间隔很长时间。实验显示在Minecraft和真实场景中都表现出色,为游戏、自动驾驶、机器人等领域带来广阔应用前景。
AWS通过升级SageMaker机器学习平台来扩展市场地位,新增观测能力、连接式编码环境和GPU集群性能管理功能。面对谷歌和微软的激烈竞争,AWS专注于为企业提供AI基础设施支撑。SageMaker新功能包括深入洞察模型性能下降原因、为开发者提供更多计算资源控制权,以及支持本地IDE连接部署。这些更新主要源于客户需求,旨在解决AI模型开发中的实际问题。
MTS AI研究团队提出RewardRanker系统,通过重排序模型和迭代自训练显著提升AI代码生成质量。该方法让13.4B参数模型超越33B大模型,在多种编程语言上表现优异,甚至在C++上超越GPT-4。通过引入困难负样本和PPO优化,系统能从多个代码候选中选出最优方案,为AI编程助手的实用化奠定基础。