博科近日宣布,日本最大的互联网公司以及全球数字市场领导者——雅虎(日本)公司已完成博科以太网矩阵解决方案的部署,将其作为整个企业大数据项目的网络基础。新的博科以太网矩阵现在为Apache Hadoop提供高性能数据吞吐量,同时较之前基础架构削减了一半运营成本。
大数据是雅虎(日本)的关键战略计划。部署该项目是为了帮助公司保持其“向用户提供互联网服务”方面的创新领导地位。Hadoop用来分析从其门户网站获取的大量信息,并充分利用这些数据来改进雅虎(日本)的服务质量,并且创建新服务。Hadoop还用来支持电子商务,并能够为公司的用户群每天提供数百万个性化的相关内容推荐。
在雅虎(日本),博科VDX以太网矩阵模块和固定端口网络交换机替代了传统基于生成树协议的网络。新的自动化网络基础架构连接了数百个服务器,这些服务器又支持数千个节点,专门用来支持整个企业的Hadoop分析。
随着企业机构内部大数据分析要求和感知价值的显著增长,雅虎(日本)迅速意识到必须构建一个可在整个企业共享的更大的新Hadoop基础架构。显而易见的是,由于数据吞吐量限制、无法轻松增加容量,以及与日俱增的运营复杂性使得应用程序性能和可用性面临风险,传统网络并不适合新的Hadoop设计。
为大数据提供坚实基础
在雅虎(日本)支持新Hadoop环境的网络要求包括:能够扩展环境,以高成本效益迅速增加更多节点,需要支持节点间的突发、高速通信等方面。在对备选方案进行分析之后,雅虎(日本)决定,以太网矩阵架构最适合其新的Hadoop环境——能够轻松灵活地进行扩展,并且具有高性能数据吞吐量。
在确定最适合Hadoop的网络要求之后,雅虎(日本)认真对比并测试了几种以太网矩阵解决方案,评估其性能、功能、成本和运营管理。评估一结束,公司就因为高性能、低延迟、深缓冲以及自动化部署和运营简洁性而敲定使用博科 VCS矩阵技术和博科VDX交换机,由于不再需要手动配置,从而节约了时间。
现在,这一新开发的、用于整个企业的共享Hadoop网络基础架构包含多个带有数千个节点的集群。高密度博科VDX 8770模块化机箱作为汇聚交换机来使用,它集成了一系列机架,以便在交换机之间创建矩阵。VDX机箱利用交换机的高带宽多机箱中继(MCT)功能而连接至博科MLXe核心路由器。公司还部署了固定端口博科VDX交换机,以便为雅虎(日本)集团公司其它项目所使用的较小的Hadoop基础架构来构建矩阵。
分析师观点:大数据的以太网矩阵
据Gartner的数据1显示,“大数据服务器产生大量网络要求、放量和突发服务器-到-服务器(例如:东/西)流量。要想应对这些特征,网络设计师必须确保其网络交换基础架构满足关键要求。”
就在同一份报告中,Gartner表示,大数据部署中的交换机应通过“高带宽接入和上行链路接口”来解决“服务器之间的高流量”,以及“低延迟”问题。交换基础架构必须还要通过“具有低超利用率的线速功能,深层数据包缓冲功能以及低延迟”来解决“突发流量模式和不同数据采集模式”的大数据特点。已经部署现代“以太网矩阵”(例如一层或两层物理网状或部分网状拓扑)的企业机构将有可能满足上述网络要求。
雅虎(日本)网站运营部门基础架构工程部数据中心网络经理Kenya Murakoshi表示:“除了提供支持大量流量来处理我们新Hadoop环境所需的高性能以外,博科VCS矩阵还让我们能够将网络部署和运营所花的时间减少一半以上,这将显著降低运营成本。与其它矩阵技术相比,博科VCS矩阵的简洁性是不可思议的,从而让我们能够以巨大的灵活性快速扩展网络。”
博科数据中心与校园网络副总裁Jason Nolet表示:“雅虎(日本)是越来越多采用我们以太网矩阵交换机来支持企业大数据计划的一个典型代表。我们非常高兴能够成为雅虎(日本)Hadoop解决方案的关键组成部分,并且很自豪能够提供同类最佳的网络自动化和性能,帮助雅虎(日本)显著降低其运营成本,同时确保关键应用程序以最佳水平运行。”
好文章,需要你的鼓励
本文探讨如何使用生成式AI和大语言模型作为倾听者,帮助用户表达内心想法。许多主流AI如ChatGPT、Claude等被设计成用户的"最佳伙伴",或试图提供心理健康建议,但有时用户只想要一个尊重的倾听者。文章提供了有效的提示词技巧,指导AI保持中性、尊重的态度,专注于倾听和理解,而非给出建议或判断。同时提醒用户注意隐私保护和AI的局限性。
北京大学团队开发出WoW世界模型,这是首个真正理解物理规律的AI系统。通过200万机器人互动数据训练,WoW不仅能生成逼真视频,更能理解重力、碰撞等物理定律。其创新的SOPHIA框架让AI具备自我纠错能力,在物理理解测试中达到80.16%准确率。该技术将推动智能机器人、视频制作等领域发展,为通用人工智能奠定重要基础。
人工通用智能和超级人工智能的出现,可能会创造出一种全新的外星智能形态。传统AI基于人类智能模式构建,但AGI和ASI一旦存在,可能会选择创造完全不同于人类认知方式的新型智能。这种外星人工智能既可能带来突破性进展,如找到癌症治愈方法,也可能存在未知风险。目前尚不确定这种新智能形态是否会超越人类智能,以及我们是否应该追求这一可能改变人类命运的技术突破。
香港大学和蚂蚁集团联合推出PromptCoT 2.0,这是一种让AI自动生成高质量训练题目的创新方法。通过"概念-思路-题目"的三步策略,AI能像老师备课一样先构思解题思路再出题,大幅提升了题目质量和训练效果。实验显示该方法在数学竞赛和编程任务上都取得了显著提升,为解决AI训练数据稀缺问题提供了新思路。