0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

突破四大挑战,破解AI流量预测难题

我快闭嘴 来源:CCTIME飞象网 作者:CCTIME飞象网 2020-08-04 16:29 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

一个夏日的夜晚,台湾远传电信在台南某地区网络流量突然暴增,发出告警,没有人预料到夜半时分的台南会迎来流量高峰。调查发现,当时TikTok刚刚在台南兴起,很多年轻人热衷于睡前用手机刷短视频,导致夜半时分的网络流量陡升。

为了更精准地提前掌握网络流量,让流量调度最优化,远传在2018年加入微软亚洲研究院“创新汇”,成为微软长期的AI战略合作伙伴,期望通过双方的紧密合作,运用微软在AI领域突破性的技术成果,结合远传长期布局物联网产业应用、大数据平台建设,以及强大的ICT整合实力,让双方的创新研发能力与行业经验形成优势互补。

远传与微软合作的重要成果之一,包含共同研发的AI网络流量预测模型,可以精准预测未来一周中每15分钟内核心基站、二级基站以及OTT服务的流量,实现网络流量的智能动态配置。

优化全网性能,需要智能流量预测

远传一直致力于为用户提供多元化、丰富的优质体验和创新应用服务。远传电信总经理井琪表示:“电信行业竞争激烈,远传很早就启动了转型计划,确定了‘大人物’战略,即借助大数据、人工智能、物联网技术去转型和创新。远传的AI策略是由内而外的:对内进行员工AI培训、培养AI人才、逐步强化AI产品;对外针对消费者和企业级客户,提供‘大人物’解决方案。通过内外兼具的AI策略,给客户提供最好的服务。”

台湾地区的电信用户的网络使用量在全球名列前茅,经常会发生上文所提到的网络流量需求大增的情况,如何进行最有效的调度并优化网络,尤为关键。

在加入微软亚洲研究院创新汇以后,远传电信就着手收集公司各部门的痛点,并与微软亚洲研究院一起率先开启智能流量预测方面的探索。远传电信的工程师提出,希望设计一个智能流量预测模型,可以预测核心基站、二级基站的流量,以及每个基站上Top 100网站等OTT服务的流量。

由于不同地区用户的喜好不同,基站位置也不同,A地区的用户可能偏爱某些短视频应用,而B地区的用户则爱用某些游戏或视频网站,就会使每个基站的流量因用户的偏好存在相当大的差异。如果有了AI流量预测模型,就可以有效判断网络用户的上网行为,预测出某一地区、某一时段的用户可能使用的应用服务、观看的节目、进行的游戏,进而将用户所喜欢的内容推送到离他最近的网络节点上,甚至将用户常用的应用程序部署在靠近用户一端的节点上,大幅降低网络延迟,提升用户体验。此外,智能流量预测也能为远传电信5G基站选址提供更精准的依据。

传统的预测模型只能针对核心大基站进行线性的全流量预测,只有少量第三方的开源工具可以针对具体的网络应用流量进行预测,但准确率不高,无法提供有效的指导。“对于AI来说,做预测恰恰是它的强项,”微软亚洲研究院副院长刘铁岩博士表示,“近年来微软亚洲研究院通过‘创新汇’项目与行业领军企业合作,在金融、物流、医疗等领域都发挥出了AI的巨大潜能。我们相信,AI也一定能够在优化电信网络、智能预测流量、提升电信服务性能等方面发挥独特作用,成为赋能电信领域的核心技术支撑。”

突破四大挑战,破解流量预测难题

经过4个多月的努力,双方合作研究的AI流量预测模型效果显著:核心基站的EPG总流量预测准确率达99%;二级基站的eNB总流量预测准确率达90.5%;针对Top 100网站等OTT服务流量预测准确率达74%;可精准预测未来一周每15分钟内的流量。据微软亚洲研究院首席研究经理边江博士介绍,针对具体的网络环境,研究员们从四个方面突破挑战,通过AI技术大大提升了不同层级基站上不同服务的流量预测准确率。

其一,创新神经网络实现超长序列建模。流量趋势具有明显的周期性,或天、或周、或月的某个时间段的某个应用服务会出现高峰,因此长时间序列模型的训练更容易找到其中的规律。而传统基于统计的方法不能有效利用较长时间的数据,对此,微软亚洲研究院采用了跨层链接的扩张循环神经网络(Dilated RNN + Skip Connections),在局部对数据进行跳跃式选取,确保了模型可以利用长时间数据进行建模。

其二,流量峰值预测,把握分寸最重要。为了达到最优的效果,AI技术不仅需要精准预测出某段时间流量高峰的来临,而且还要确保预测的偏差值要稍微高于峰值,让流量配置有适当的冗余,但预测峰值也不宜过高,以免造成带宽资源的浪费。研究员们采用了两个函数来保证预测偏差值处于最佳状态,一个确保整体预测的准确度,另一个针对实际应用环境,将峰值适当向上偏移。在不同的网络环境下,两个函数进行加权组合,确保相应场景下的最合适的预测准确率。

其三,数据抖动和噪声需正则化处理。不同基站上不同服务的属性差别相当大,例如一线城市需要经常访问海外搜索网站,三、四线城市对视频、游戏类应用的需求较大,不同属性的流量数据存在巨大差异,有着较大的抖动和噪声,而且部分数据的比例缺失,不利于模型学习。基于此,微软亚洲研究院针对不同基站节点和服务的数据进行正则化处理,使得在不同时间点训练模型时,数据都可以在相对一致的分布区间,保证模型在不同时间、不同信号上都能做到更加精确的学习。

其四,AI技术与行业洞察相结合,更精准。基于远传电信专业人员的行业经验,双方建立了一个知识库,与多层次智能预测模型结合使用。例如运营人员会有些常规经验总结,类似A应用一般在中午12点左右出现流量高峰、B搜索网站的峰值可能会是晚上7、8点钟等,行业洞察和经验积累与预测模型动态加权,更好地保证了整体流量预测的准确率。

授人以鱼不如授人以渔

事实上,在解决业务难题的同时,微软亚洲研究院希望通过合作“授之以渔”,帮助合作伙伴具备AI的思维和能力。远传电信执行副总裁饶仲华表示:“远传电信一直在寻找将时间序列融入到机器学习中的突破点。此次超长建模的实现,让远传电信更好地掌握了将时间序列与神经网络模型关联的方法,这样的模型算法并不只局限于流量预测上,只要数据丰富,有大量的时间序列,举一反三之后,类似的AI模型可以解决更多与时间序列有关的业务问题。”

除此之外,远传电信对机器学习所需的数据也有了进一步的了解,对数据的收集、处理与存储也形成了较为系统的方法。“过去,我们认为原始数据只要做了数据清洗之后就可以使用,但事实远比想象的复杂,其中数据的收集手段、存储时间、规模大小、处理过程都会影响数据的品质,影响机器学习的训练进程,”远传电信执行副总裁饶仲华表示。以AI流量预测模型为例,预测周期为15天时,需要连续3、4个月的数据;周期为一年,就需要3、4年的数据,而并不是一个月或一年的数据就足够。“在与微软研究员的探讨中,我们也形成了良好的数据收集方式,为将来的AI模型训练奠定高质量的数据基础。”

数字化转型,心态和文化是核心

一直以来,远传电信都将用户体验放在第一位,希望可以让用户享受到更高质量的网络服务,提升用户满意度。

“远传电信坚信技术能够改变世界,所以我们从来没有停止探索新技术对于自身业务的提升。”远传电信总经理井琪表示,“很高兴与微软亚洲研究院合作,用AI预测通信网络流量场景,让我们看到了AI技术在电信行业的无限潜力。”

微软亚洲研究院副院长刘铁岩表示,“为了将AI与电信场景相结合,远传电信和微软亚洲研究院在多个业务领域做过探讨,AI流量预测模型的成功合作得益于远传电信一直以来对于数字化转型战略的坚持。此次合作开启了双方在AI+电信领域的携手创新,同时也是远传电信在数字化转型路上的诸多里程碑之一。”

在新冠疫情席卷全球、颠覆人们生活和工作方式的今天,越来越多的企业意识到数字化转型的重要性和紧迫性。而多年前就开始进行数字化转型的远传电信认识到,企业转型的最大挑战和核心,是心态和文化上的转变,这需要管理者具有强大的领导力和魄力,能够引领所有员工达成共识,才能使转型顺利进行。同时,企业数字化转型还需要从上至下、由内而外、从人才文化到组织架构全方位做好准备。

“在转型的过程中,远传电信不断提升自身的能力以及核心价值。未来,我们将持续利用大数据、人工智能和物联网技术转型成为数字化企业。我们希望通过与微软亚洲研究院持续合作,探索数据驱动的新服务,利用数据模型增值现有应用,深耕AIoT领域,时刻准备好迎接新机遇。”远传电信总经理井琪表示。
责任编辑:tzh

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 网络
    +关注

    关注

    14

    文章

    8130

    浏览量

    93088
  • AI
    AI
    +关注

    关注

    89

    文章

    38091

    浏览量

    296586
  • 人工智能
    +关注

    关注

    1813

    文章

    49734

    浏览量

    261509
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    技术赋能农业:有人物联网“农业情监控方案”破解精准种植难题

    与决策的完整技术答卷,为智慧农业提供了可复制的落地范式。 一、 真实痛点:传统农业的四大技术洼地 信息孤岛 :气候、土壤等关键环境信息依赖人工采集,数据滞后且不连续。 病虫防控被动 :病虫害发生难以预测,往往发现即成灾,防
    的头像 发表于 11-28 11:20 146次阅读
    技术赋能农业:有人物联网“农业<b class='flag-5'>四</b>情监控方案”<b class='flag-5'>破解</b>精准种植<b class='flag-5'>难题</b>

    后摩智能六篇论文入选四大国际顶会

    2025年以来,后摩智能在多项前沿研究领域取得突破性进展,近期在NeurIPS、ICCV、AAAI、ACMMM四大国际顶会上有 6 篇论文入选。致力于大模型的推理优化、微调、部署等关键技术难题,为大模型的性能优化与跨场景应用提供
    的头像 发表于 11-24 16:42 683次阅读
    后摩智能六篇论文入选<b class='flag-5'>四大</b>国际顶会

    新能源电子EMC整改:破解电磁兼容难题的系统工程

    深圳南柯电子|新能源电子EMC整改:破解电磁兼容难题的系统工程
    的头像 发表于 11-13 09:27 272次阅读

    新能源电子EMC整改:破解电磁兼容难题的系统方案

    深圳南柯电子|新能源电子EMC整改:破解电磁兼容难题的系统方案
    的头像 发表于 11-04 09:56 192次阅读

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI的科学应用

    是一种快速反应能力,是直接的感知;灵感是一种通过思考和探索获得的创造性想法,是一种创意。 AI怎么模拟直觉与灵感呢?AI代替人类的假说 这可能吗? 用机器来生成假说: 1、直接生成 生成式
    发表于 09-17 11:45

    云翎智能单北斗高精度执法记录仪:赋能消防应急复杂场景救援难题

    云翎智能高精度消防执法记录仪通过厘米级定位、5G实时传输、AI智能预警及区块链存证四大核心技术,构建了“精准感知-智能决策-高效执行”的应急救援闭环,为消防应急提供全流程赋能,具体体现在以下方面。云
    的头像 发表于 09-13 11:06 559次阅读
    云翎智能单北斗高精度执法记录仪:赋能消防应急复杂场景救援<b class='flag-5'>难题</b>

    实时监测技术如何破解高温巡检难题

    持续高温,电网负荷屡创新高。设备过热引发故障风险激增,如何准确防控?本文聚焦实时监测技术如何破解高温巡检难题
    的头像 发表于 08-12 14:20 607次阅读
    实时监测技术如何<b class='flag-5'>破解</b>高温巡检<b class='flag-5'>难题</b>

    5G+AI驱动:云翎智能防爆执法仪破解电力作业现场可视化监管难题

    云翎智能防爆执法记录仪通过5G与AI技术的深度融合,构建了“双核驱动”的技术架构,精准破解了电力作业现场可视化监管的四大核心难题,成为能源行业智能化转型的标志性工具。云翎智能电力防爆巡
    的头像 发表于 07-01 22:33 414次阅读
    5G+<b class='flag-5'>AI</b>驱动:云翎智能防爆执法仪<b class='flag-5'>破解</b>电力作业现场可视化监管<b class='flag-5'>难题</b>

    RAKsmart服务器如何助力企业破解AI转型的难题

    当今,企业AI转型已成为提升竞争力的核心战略。然而,算力不足、成本失控、部署复杂等问题却成为横亘在转型路上的“三座大山”。面对这一挑战,RAKsmart服务器凭借其技术创新与全球化资源整合能力,为企业提供了一套从底层硬件到上层应用的全栈解决方案,助力企业
    的头像 发表于 05-27 10:00 329次阅读

    FPGA+AI王炸组合如何重塑未来世界:看看DeepSeek东方神秘力量如何预测......

    突破40%;数据中心加速卡市场复合增长率达34%...... 2. 万亿级市场的四大赛道1) 智能驾驶新基建:单辆L4自动驾驶车搭载12-16片FPGA;动态可重构技术实现毫秒级算法切换
    发表于 03-03 11:21

    AI赋能边缘网关:开启智能时代的新蓝海

    ,准确率达到99.9%。 这一技术革新正在创造巨大的商业价值。在智慧城市领域,AI边缘网关可以实现交通流量实时分析、违章行为智能识别;在工业互联网中,能够实现设备预测性维护、生产工艺优化;在智慧能源领域
    发表于 02-15 11:41

    中兴通讯AiCube:破解AI模型部署难题

    ,成为制约技术价值释放的新痛点。 异构算力适配困难、算力资源利用率低以及数据安全风险高等问题,让许多企业在AI技术的实际应用中遇到了瓶颈。这些问题不仅增加了部署的难度,还可能导致资源的浪费和潜在的安全威胁。 为了破解这一难题,中
    的头像 发表于 02-13 09:11 875次阅读

    Ampere 年度展望:2025年重塑IT格局的四大关键趋势

    ,未来一年各行各业都将面临重新思考其战略以适应新变化的挑战。基于关键观察与行业信号, 以下是 Ampere 对 2025 年做出的四大预测。 趋势一:从实验到执行:生成式AI 推理成为
    的头像 发表于 12-20 16:11 946次阅读

    Ampere预测2025年IT领域的发展趋势

    随着 IT 领域的持续演变,新的趋势正在涌现并有望在 2025 年重塑企业对待技术的方式。从生成式 AI 到数据主权,未来一年各行各业都将面临重新思考其战略以适应新变化的挑战。基于关键观察与行业信号, 以下是 Ampere 对 2025 年做出的
    的头像 发表于 12-19 15:39 1159次阅读

    电线EMC电磁兼容性测试整改:破解电磁干扰的难题

    深圳南柯电子|电线EMC电磁兼容性测试整改:破解电磁干扰的难题
    的头像 发表于 12-11 11:19 1282次阅读
    电线EMC电磁兼容性测试整改:<b class='flag-5'>破解</b>电磁干扰的<b class='flag-5'>难题</b>