0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

中国移动携手华为发布分布式推理网络技术白皮书

华为数据通信 来源:华为数据通信 2025-05-15 14:14 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

2025年,随着DeepSeek等AI大模型的火爆,DAU增长速度不断刷新行业记录。然而,另一方面,海量并发用户请求访问激增,服务器资源被迅速耗尽,多次出现网页和API无法访问的情况。同时,AI大模型的火爆也吸引攻击者使用多种技术和手段持续攻击。上述问题暴露了AI大模型规模应用面临的三大挑战:AI推理基础设施能力不足、AI推理网络架构及技术待完善、AI服务网络安全防护能力待提升。

近日,在中国云网智联大会期间,中国移动研究院携手华为及产业合作伙伴,重磅发布了《分布式推理网络(Distributed Inference Network,DIN)技术白皮书》,聚焦AI发展面临的挑战,定义了分布式推理网络的目标架构,结合分布式计算、边缘智能和动态调度技术,加速普惠AI发展进入“推理时刻”。

白皮书从AI模型发展趋势、推理服务网络需求、分布式推理架构及关键技术等方面进行了阐述,重点阐述了分布式推理网络采用可扩展分布架构,综合运用多种关键技术实现端、边、网、算的有效协同,提供差异化、高安全、高并发、高频次的网络连接服务保障。

关键技术一: 节点间互联质量保障技术

为满足推理业务的低时延、高可靠、大带宽等需求,边缘推理设备如新一代AI路由器及智能单板等,基于AI进行应用精准识别,根据AI推理呈现应用级QoE,按照业务需要实现路径调优或精准扩容,实现应用级差异化、确定性的体验保障。同时,分布式推理业务催生了海量数据高效传输需求,这对广域网络提出了“零丢包”和“极低抖动”的双重挑战,弹性无损、流级流控等关键技术实时感知网络拥塞状况,基于精准流控反压、层次化细粒度切片实现网络无损和微秒级抖动等极致性能。

关键技术二: 推理服务的调度技术

模型调度是DIN的主要功能之一,旨在根据用户需求、设备性能、网络状态等多重因素,按需动态生成业务调度策略,将业务沿最佳路径调度到目的推理服务节点。通过高效的模型调度,DIN能够在复杂多变的环境中实现资源的智能分配,为用户提供低延迟、高可用的AI服务,同时降低运营成本。

关键技术三: 模型推理安全防护技术

DIN利用嵌入AI技术,具备入侵检测和防御能力,与安全平台协同,做到恶意流量快速感知、自动阻断;通过以太网相干PHYSec技术对模型分发、KV Cache等数据实现低时延、零开销的物理层比特流安全加密,防止百公里链路传递过程中被中间节点窃取或篡改。

展望未来,华为积极配合中国移动实现分布式推理网络的演进和部署,通过华为AI WAN解决方案优势,助力中国移动构建融合端、边、网、算的DIN技术体系和标准体系,解决大模型在个人、家庭及企业应用中的成本、效率与场景适配难题,加速AI普惠化发展,引领迈向全面智能社会。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 华为
    +关注

    关注

    217

    文章

    35783

    浏览量

    260709
  • 网络
    +关注

    关注

    14

    文章

    8130

    浏览量

    93084
  • 中国移动
    +关注

    关注

    22

    文章

    5699

    浏览量

    77203

原文标题:AI WAN@517 电信日 | 中国移动携手华为等推出分布式推理网络技术,加速普惠AI进入“推理时刻”

文章出处:【微信号:Huawei_Fixed,微信公众号:华为数据通信】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    华为联合发布园区自智网络技术白皮书

    近日,在沙特国王大学(KSU)主办的AI教育峰会期间,华为联合全球固定网络创新联盟(以下简称“NIDA”)与沙特国王大学(以下简称“KSU”),共同发布了《园区自智网络技术
    的头像 发表于 11-25 15:12 399次阅读

    中国移动携手华为等产业伙伴推出智简天线能力演进白皮书

    在近日于广州召开的2025中国移动全球合作伙伴大会上,一场围绕智简天线的专项发布会备受关注。在该发布会上,产业链“链长”中国移动联合华为等行
    的头像 发表于 10-30 11:02 501次阅读

    华为联合推出矿山场景智能微网解决方案技术白皮书

    第二十七届(2025)中国国际矿业大会于10月23-25日隆重举行,华为数字能源携手中国矿业联合会、华东勘测设计研究院有限公司,在大会上发布《智能微网解决方案
    的头像 发表于 10-24 09:52 482次阅读

    华为乾崑智能汽车解决方案网络安全白皮书发布

    华为乾崑智能汽车解决方案网络安全白皮书》(以下简称“白皮书”),该白皮书汇集了各参编单位在智能网联汽车
    的头像 发表于 10-21 09:37 464次阅读

    奇异摩尔助力OISA全向智感互联IO芯粒技术白皮书发布

    在今日举行的2025开放数据中心委员会(ODCC)峰会期间,中国移动主导的《OISA全向智感互联IO芯粒技术白皮书》正式发布,并荣获2025 ODCC 年度卓越成果奖。作为AI
    的头像 发表于 09-23 15:55 1548次阅读
    奇异摩尔助力OISA全向智感互联IO芯粒<b class='flag-5'>技术</b><b class='flag-5'>白皮书</b><b class='flag-5'>发布</b>

    华为联合发布Wi-Fi 7 Advanced技术白皮书

    华为数据通信创新峰会2025拉美站期间,华为联合IEEE、行业客户面向拉美发布《Wi-Fi 7 Advanced技术白皮书》(以下简称《
    的头像 发表于 08-11 10:40 1629次阅读

    华为发布高品质万兆AI园区建网技术白皮书

    在2025世界人工智能大会(WAIC)“人工智能+网络赋能企业数智化创新发展论坛”上,华为携手全球多家标准组织共同发布《高品质万兆AI园区建网技术
    的头像 发表于 08-01 14:40 1399次阅读

    中国移动携手华为发布网络运行大模型2.0

    近日,在2025 MWC上海期间,由IMT2020(5G)推进组和中国移动主办、华为承办的5G-A网络赋能差异化体验产业圆桌上,中国移动携手
    的头像 发表于 07-01 15:32 847次阅读

    华为携手WAA联盟推出智慧园区WLAN通感一体发展和应用白皮书

    华为数据通信创新峰会2025亚太站期间,华为联合世界无线局域网应用发展联盟WAA和行业客户发布《智慧园区WLAN通感一体发展和应用白皮书》(以下简称《
    的头像 发表于 06-11 11:09 1089次阅读

    中国移动携手华为发布全球首个5G新通话DC应用

    2025年5月,中国移动携手华为在河南率先发布全球首个5G新通话DC(Data Channel,数据通道)应用,这场“触屏交互通话”技术的革
    的头像 发表于 05-19 11:48 1254次阅读

    华为发布星河AI融合SASE解决方案白皮书

    面向中东地区发布星河AI融合SASE解决方案白皮书(以下简称“白皮书”)。白皮书全面阐述SASE解决方案在AI时代的应用前景,从网络架构、关
    的头像 发表于 05-10 14:06 1266次阅读

    华为助力中国移动全面升级“九州”算力互联网

    中国移动云智算大会期间,以“智算启新,安全筑基“为主题的智算基础设施及安全峰会成功举办。会上,中国移动联合华为等重磅发布了《“九州”算力互联网(MATRIXES)“AI+”时代目标架
    的头像 发表于 04-14 16:46 950次阅读

    雷曼光电参编的COB显示屏调研白皮书发布

    近日,2025中国国际LED产业发展大会暨首届JM Insights春茗会&COB显示屏调研白皮书发布在深圳举办,汇聚了数百家产业链头部企业、权威专家及行业机构。会上,行业内首本定位于LED
    的头像 发表于 02-24 14:24 1015次阅读

    中国移动联合飞腾公司发布无线智算网络样机

    近日,由中国通信学会、电子科技大学等单位共同主办的2024中国信息通信大会在四川成都顺利召开。期间,在中国移动研究院承办的第三届无线通算智融合共生技术专题研讨会上,
    的头像 发表于 12-27 14:16 904次阅读

    Omdia与华为发布NPS管理白皮书

    近日,全球知名分析师机构Omdia携手华为,共同举办了“数据驱动的NPS管理白皮书”全球发布会。此次发布会旨在深入探讨电信行业NPS(净推荐
    的头像 发表于 12-23 14:47 1699次阅读