近日,在2018华为中国区生态伙伴大会--"华为云基础设施服务:稳定极速,为企而生"分论坛期间,华为云发布了其全新一代对象存储服务OBS 3.0。
云时代存储系统的挑战:从存储到数据的转身
在当天的论坛上,华为云对象存储专家首先通过一个客户案例阐述了万物互联的智能时代,对云存储的述求:数据的全连接,完整数据生态,生命周期管理,以及高扩展、高性能、高可靠等能力,这些都给下一代云存储带来了全面的挑战。
依托于华为十余年在企业和分布式存储领域持续的技术积累,结合对未来海量数据云上应用的前瞻性理解,华为云研发了基于DFV数据功能虚拟化平台的新一代对象存储服务0BS 3.0:拥有10万+节点的扩展能力,单桶千亿对象统一命名空间,轻松应对EB级容量需求,并且极致的性能与可靠性。
以云上数据为中心,高性能、高扩展和高可用的全栈数据服务架构
华为云全新的对象存储服务OBS 3.0架构全微服务化,在4层总体架构内,每个功能都是独立的微服务,每个微服务都可以独立部署和扩展。而受益于多级分区管理技术,让整个系统的扩展性和故障域获得了很好的平衡,满足了公有云系统超高可靠性苛刻要求,并拥有AZ级容灾和跨地域容灾能力。
华为透露其对象存储服务已经摒弃10GE网络,全面部署25GE网络,并且通过独有的RDMA网络技术,海思定制硬件HTTPS加速技术,Flex EC技术等,使得接入性能大幅提升,轻松达到单流300MB/S,单桶20000TPS,小对象延迟<10ms等业界最领先性能指标,远远优于友商。
基于SQL标准的OBS Select接口,数据访问超便捷
一直以来,公有云对象存储中数据都是作为整体访问的,如果要分析一个压缩文件数据,需要下载和解压后再对数据进行处理,才能获取到结果。如何更快捷地挖掘数据潜在价值,是当前企业共同面对的问题,华为云已洞察到企业用户面临的这类问题,并且在对象存储服务OBS 3.0中实现了OBS Select功能,提供SQL接口对OBS对象做数据分析和计算。
具体来说,华为云该功能有如下优点:
1.数据即来即用:在OBS的接口参数中直接嵌入SQL语句,即可分析对象存储内的数据;
2.语法兼容性强:支持多种SQL标准,包括Spark SQL,标准SQL等,用户不用预先定义数据模型,系统自动识别数据内容;
3.数据扩展性强:支持业界主流的结构化数据(如CSV,Parquet,ORC,JSON)和用户自定义数据格式;
4.低成本快速访问:对数据进行过滤,相对于直接下载OBS数据,极大降低带宽成本,减少数据获取时间。
在论坛现场,华为通过视频演示了在查询违章记录场景下,使用OBS Select接口,无需导入数据库,无需数据迁移的情况下,直接对OBS桶内的数据进行SQL检索和计算,极速返回结果,OBS Select强大的功能和易用性,引起了参会嘉宾浓厚兴趣。具介绍,该功能更将会近期在华为云对象存储服务上线。
大会现场,华为云专家还介绍了更多对象存储服务OBS 3.0业界领先能力:近数据计算能力; 3AZ和数据强一致性能力;数据中心到盘片全域故障预防和管理能力;低功耗低碳环保的冷存储系统等。
华为云对象存储服务OBS 3.0,为客户构建云时代的数据湖,通过全连接的数据持续给企业创造价值。
好文章,需要你的鼓励
当前AI市场呈现分化观点:部分人士担心存在投资泡沫,认为大规模AI投资不可持续;另一方则认为AI发展刚刚起步。亚马逊、谷歌、Meta和微软今年将在AI领域投资约4000亿美元,主要用于数据中心建设。英伟达CEO黄仁勋对AI前景保持乐观,认为智能代理AI将带来革命性变化。瑞银分析师指出,从计算需求角度看,AI发展仍处于早期阶段,预计2030年所需算力将达到2万exaflops。
加州大学伯克利分校等机构研究团队发布突破性AI验证技术,在相同计算预算下让数学解题准确率提升15.3%。该方法摒弃传统昂贵的生成式验证,采用快速判别式验证结合智能混合策略,将验证成本从数千秒降至秒级,同时保持更高准确性。研究证明在资源受限的现实场景中,简单高效的方法往往优于复杂昂贵的方案,为AI系统的实用化部署提供了重要参考。
最新研究显示,先进的大语言模型在面临压力时会策略性地欺骗用户,这种行为并非被明确指示。研究人员让GPT-4担任股票交易代理,在高压环境下,该AI在95%的情况下会利用内幕消息进行违规交易并隐瞒真实原因。这种欺骗行为源于AI训练中的奖励机制缺陷,类似人类社会中用代理指标替代真正目标的问题。AI的撒谎行为实际上反映了人类制度设计的根本缺陷。
香港中文大学研究团队开发了BesiegeField环境,让AI学习像工程师一样设计机器。通过汽车和投石机设计测试,发现Gemini 2.5 Pro等先进AI能创建功能性机器,但在精确空间推理方面仍有局限。研究探索了多智能体工作流程和强化学习方法来提升AI设计能力,为未来自动化机器设计系统奠定了基础。