在21日召开的华为开发者大会2024上,华为云CTO张宇昕表示:“华为云对AI 开发生产线ModelArts进行升级,在AI开发基础设施和流水线之上,构建了大模型即服务平台 ModelArts Studio。提供百模千态的第三方大模型托管服务,支持对大模型定制开发,并提供相应的工具和行业集成套件,让客户可以方便的将大模型与业务系统结合。”
华为云CTO张宇昕
ModelArts Studio大模型即服务平台具备三大特点:
一、支持零代码、免配置模型开发:华为云沉淀盘古大模型的开发经验,以及100多个第三方大模型基于昇腾平台适配和调优的经验,为企业模型调优自动推荐最优配置参数。
二、支持多模型智能路由:ModelArts Studio能够根据任务类型、模型效果自动选择合适的模型,例如将复杂推理类任务路由给盘古处理,而将简单的文案生成类请求路由给开源模型来处理。从而提升企业的模型管理和维护效率,降低模型调用成本25%以上。
三、提供多个智能Agent:ModelArts Studio沉淀了50多个智能Agent,可以准确理解业务意图,分解复杂任务,帮助企业快速智能构建和部署大模型应用。
好文章,需要你的鼓励
Lumen Technologies对美国网络的数据中心和云连接进行重大升级,在16个高连接城市的70多个第三方数据中心提供高达400Gbps以太网和IP服务。该光纤网络支持客户按需开通服务,几分钟内完成带宽配置,最高可扩展至400Gbps且按使用量付费。升级后的网络能够轻松连接数据中心和云接入点,扩展企业应用,并应对AI和数据密集型需求波动。
阿里巴巴团队提出FantasyTalking2,通过创新的多专家协作框架TLPO解决音频驱动人像动画中动作自然度、唇同步和视觉质量的优化冲突问题。该方法构建智能评委Talking-Critic和41万样本数据集,训练三个专业模块分别优化不同维度,再通过时间步-层级自适应融合实现协调。实验显示全面超越现有技术,用户评价提升超12%。
RtBrick研究警告,运营商面临AI和流媒体服务带宽需求"压倒性"风险。调查显示87%运营商预期客户将要求更高宽带速度,但81%承认现有架构无法应对下一波AI和流媒体流量。84%反映客户期望已超越网络能力。尽管91%愿意投资分解式网络,95%计划五年内部署,但仅2%正在实施。主要障碍包括领导层缺乏决策支持、运营转型复杂性和专业技能短缺。
UC Berkeley团队提出XQUANT技术,通过存储输入激活X而非传统KV缓存来突破AI推理的内存瓶颈。该方法能将内存使用量减少至1/7.7,升级版XQUANT-CL更可实现12.5倍节省,同时几乎不影响模型性能。研究针对现代AI模型特点进行优化,为在有限硬件资源下运行更强大AI模型提供了新思路。