根据IDC预测,2025年全球数据量将增至175ZB ,而随着数据的海量增长,企业的数字基础设施成为支撑企业数字化转型最重要的底座。
特别是互联网行业,随着数据的海量增长和创新应用的不断出现,如何构建能够更低成本的保存海量数据,并实现数据的有效利用成为互联网企业在构建现代化数字基础设施所考虑的问题。从数据角度看,基于图片、音视频、流媒体等非结构化数据的激增,以及4K高清、VR\AR、短视频等多样性的应用创新不断对数字基础设施形成新的挑战。
在这个背景之下,互联网行业一方面,应对数据的爆炸性增长,需要一个高可扩展且低成本的架构体系,同时还能支持各种大数据技术来进行有效的分析和利用;另一方面,激烈的市场竞争带来了业务需求的快速变化,需要基础架构具有足够的灵活性,能适应业务的需求快速做出调整。那么目前互联网行业的IT基础架构到底面临哪些挑战?我们应该建设什么样的IT基础架构才能让我们能从容应对这些挑战?未来基础架构将如何演进?为了探讨这些问题,至顶网邀请到百度云存储和数据库产品线负责人崔剑、英特尔云大数据技术方案架构师任晓蕾以及戴尔高级存储架构师许晶等基础架构领域的三位专家进行交流。
此次“大咖”将聚焦:
数据洪流下的互联网行业基础架构现状
随着HPC 高性能计算、AI、流媒体等新的应用的出现,互联网行业基于传统基础架构已经不能很好的为新的应用提供有效的业务支撑,新的应用对于互联网行业的底层IT基础架构提出更高的要求。面对这些挑战传统基础架构为何力不从心?互联网行业传统IT基础设施的计算和存储架构是否能为新的应用提供支撑?专家们将基于大数据时代的发展特征,来探讨互联网行业的数字基础架构现状。
大数据时代互联网行业的基础架构的变革与创新
从传统的GB到TB数据量的数据仓库扩展,到随着数据的海量增长,TB到PB的数据量,需要基础架构能够根据数据量的变化进行灵活扩展,如何实现AI应用智能和快速的处理,如何实现实时数据的可靠性实时处理,是互联网行业的IT基础设施变革和创新的方向。
基于这些关键问题,专家们将探讨基于混合云构建的大数据平台如何应对海量数据存储的挑战?如何让AI成为数据存储的好帮手?近年来存储智能化取得了哪些进展?以及面临容器技术迅速崛起,为支持容器应用存储领域做出了哪些应对之策?
面对数据洪流,基础架构的技术演进
展望未来,面临越来越复杂的存储环境,数字基础设施逐步向异构、多模的架构演进。新的架构需要满足更灵活和敏捷的应用需求。同时随着新技术的不断涌现,数字基础设施也正在发生重要变革,超融合、混合云、容器化、分布式、安全等成为这轮变革的关键词。
专家们还将探讨基础架构的演进有哪些值得关注的热点,以及云上、云下、传统存储、超融合如何并存并统一管理等新的技术和管理趋势。
除此之外,面对互联网行业的海量数据应用的挑战,戴尔专家也将深入介绍戴尔易安信是如何提供一个企业级端到端的解决方案部署的能力,来帮助互联网企业构建现代化的数据基础设施以及助力企业用户实现数据洪流的有效管理。
想了解更多关于互联网行业如何重构其数字基础设施的精彩内容请关注9月16日,下午14:00“面对数据洪流,互联网行业如何重构基础架构”为主题的大咖对话。更多精彩内容点击:http://www.zhiding.cn/special/Dell_big-data
好文章,需要你的鼓励
微软近年来频繁出现技术故障和服务中断,从Windows更新删除用户文件到Azure云服务因配置错误而崩溃,质量控制问题愈发突出。2014年公司大幅裁减测试团队后,采用敏捷开发模式替代传统测试方法,但结果并不理想。虽然Windows生态系统庞大复杂,某些问题在所难免,但Azure作为微软核心云服务,反复因配置变更导致客户服务中断,已不仅仅是质量控制问题,更是对公司技术能力的质疑。
Meta研究团队发现仅仅改变AI示例间的分隔符号就能导致模型性能产生高达45%的巨大差异,甚至可以操纵AI排行榜排名。这个看似微不足道的格式选择问题普遍存在于所有主流AI模型中,包括最先进的GPT-4o,揭示了当前AI评测体系的根本性缺陷。研究提出通过明确说明分隔符类型等方法可以部分缓解这一问题。
当团队准备部署大语言模型时,面临开源与闭源的选择。专家讨论显示,美国在开源AI领域相对落后,而中国有更多开源模型。开源系统建立在信任基础上,需要开放数据、模型架构和参数。然而,即使是被称为"开源"的DeepSeek也并非完全开源。企业客户往往倾向于闭源系统,但开源权重模型仍能提供基础设施选择自由。AI主权成为国家安全考量,各国希望控制本地化AI发展命运。
香港中文大学研究团队开发出CALM训练框架和STORM模型,通过轻量化干预方式让40亿参数小模型在优化建模任务上达到6710亿参数大模型的性能。该方法保护模型原生推理能力,仅修改2.6%内容就实现显著提升,为AI优化建模应用大幅降低了技术门槛和成本。