0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

“深兰AI智能扫路机”获得Best Industrial Video最佳工业应用视频奖

电子工程师 来源:DeepBlue深兰科技 作者:DeepBlue深兰科技 2021-04-08 15:19 次阅读

国际人工智能联合会议(International Joint Conference on Artificial Intelligence,简称为IJCAI)是人工智能领域中最主要的学术会议之一,在会议上发表的学术成果在整个AI领域都有深远的影响。IJCAI-PRICAI-20于2021年1月在日本举行,但由于疫情原因,本次会议多次调整议程。日前,深兰科技终于收到了姗姗来迟的荣誉,在NetML竞赛获得两冠一季的好成绩,尤其在AI视频竞赛中“深兰AI智能扫路机”获得Best Industrial Video最佳工业应用视频奖。

昨日,作为指导委员会成员,上海市经济和信息化委员会、中国智慧城市工作委员会、中国城市环境卫生协会智能环卫专业委员会、长三角产业发展研究院、AIII人工智能产业研究院和深兰科技(排名不分先后),共同倡议发起新一代人工智能环卫智能化产业联盟,旨在进一步集聚智能环卫领域专家学者和领跑企业,联合环卫清洁领域的产、学、研、用、资和服等单位,创新突破关键核心技术,加速建设人工智能环卫技术创新生态体系。深兰科技作为其中的唯一的人工智能企业,其冠军团队的技术实力,为环卫智能化的推进再添砝码!

最佳工业应用视频奖

IJCAI-PRICAI20 AI视频竞赛作为国际会议竞赛中不多见的形式,为研究人员和AI从业人员提供了一个展示平台,以视频的方式呈现易懂、有趣的人工智能,并体现其对社会的价值。参赛者的视频在会议的展厅中循环播放,最终奖项由参会者投票和专业评委评定产生,可谓是众望所归。

视频以深兰AI智能扫路机的第一视角,以拟人的方式模拟环卫工人一天的作息,以及在不同环境下的工作流程,巧妙地展示了机器人的自动检测目标、躲避障碍、判断交通信号、数据同步等能力,以及其背后的自动驾驶、数据管理等核心系统。视频叙述清晰,画面风格和配乐充满科技感,引人入胜。短短4分钟的视频内容丰富,以讲故事的形式让人不知不觉中了解了产品的主要信息。

这款AI智能扫路机通过在实际交通状况下的行驶,AI智能扫路机在停车、大转、障碍物避让等方面开展了多场景测试和优化调整,已基本满足了无人驾驶环卫道路保洁的要求,目前已在上海、深圳、天津等多地投入运营。

NetML竞赛获两冠一季

NetML竞赛是由英特尔公司赞助,在IJCAI-PRICAI20上组织的一场基于机器学习的流量分析竞赛。本次比赛借助IJCAI-PRICAI20参加者的专业知识,帮助网络研究人员与ML / AI社区进行互动,促进网络流量分析新方法的研究和开发。深兰科技DeepBlueAI团队在7个赛道中取得了两冠一季的好成绩。分别在Track2和Track4获得冠军,在Track5获得季军。

赛题介绍

随着互联网的发展,网络流量日益增多,同时恶意流量也在不断增加。如抢票软件、明星打榜、恶意爬虫等。为了探索更好的网络流量的分析方法,在这场比赛中,主办方NetML提供了3个不同的相关数据集(CICIDS2017,NetML,non-vpn2016),并且将label分成了3种不同的粒度,分别是top,mid 和 fine。top就是二分类区分正常流量与恶意流量;mid和fine 还需要对恶意流量进行进一步的分类。CICIDS2017数据集和NetML数据集没有mid粒度,所以一共有7个任务对应7个赛道。

评测指标

对于多分类任务:

overall = F1*mAP 。其中,F1 是每个类的f1-score乘以每个类的样本占比, mAP是所有类的平均准确率。

对于二分类任务:

overall = TPR*(1-FAR)。其中,TPR = TP/(TP+FN),FAR = FP/(TN+FP)。

赛题分析

三个数据集都是10w到50w行级别的数据量,62列特征,包含了发送接收地址与端口, 发送接收包大小,时间,hdr信息,pld统计信息,tls信息,http请求信息,dns信息等网络信息。数据集之间的区别是收集源不一样,二分类与多分类标签不一样。

经过分析,赛题有主要有以下难点:

数据处理。原始特征数量比较多而且类型复杂,包括很多类型是列表的列如dns的相关信息。如何从这类列表中提取特征是主要问题。

针对不同粒度的label提取特征。当前特征对top粒度二分类可能有用,但是区分不了剩下的多分类。

竞赛方案

自动列表类型特征提取:由于列表类型的数据是无法直接喂给模型的,所以我们对列表类型进行了聚合,从而提取了一些统计数值特征。

自动特征工程:由于原始数据特征数量较多,我们选择自动特征工程进行处理,以实现短时间内有效信息的尽量提取,并节约人工成本。我们将原始特征主要分成了类别类和数值类,并在根据类型做出不同的特征。

特征选择:经过上面两步,我们做的特征已经超过一千列了,但其中大多数是无效特征。为了避免过拟合和加速模型训练速度,我们使用了两种特征选择方法将特征减少到1/5。首先,我们通过lightgbm模型根据信息熵输出的特征重要性把这些完全没用的特征筛选出来;然后,我们选用第二种特征选择的方法是label 重排列,使用它可以筛选出一些无效的特征。label 重排列方法的主要思想是,通过label的随机打乱,并逐次学习,得到随机状态下重要性的分布,学习到哪些特征的重要性是“虚高”的。

指标优化:预测完之后,我们发现每个类别的比例与原始数据类别比例差别较大,导致得分偏低,尤其是在多分类任务中。我们就通过后处理调整阈值的方式去调整每个类别的占比。

模型融合:我们分别使用了lightgbm,catboost,xgboost这些模型。采用加权平均的方法进行融合,权重由每个单模型的效果决定。

总结

DeepBlueAI团队针对网络流量分析任务,通过数据分析、自动列表类型特征提取,自动特征工程, 在经过特征选择,指标优化和模型融合等设计了一个网络流量识别算法。该算法在本次比赛中取得了2冠1季的好成绩,有望帮助互联网识别出恶意流量,形成一个良好的网络环境。

责任编辑:lq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    206

    文章

    26831

    浏览量

    201034
  • 智能化
    +关注

    关注

    15

    文章

    4398

    浏览量

    53955
  • 人工智能
    +关注

    关注

    1773

    文章

    43373

    浏览量

    230139

原文标题:赛道 | 世界冠军加持环卫智能化 深兰获IJCAI20两冠一季+最佳工业应用视频奖

文章出处:【微信号:kmdian,微信公众号:深兰科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    迪思与百度智能云联手发布AI视频创作模型

    迪思传媒与百度智能云联手研发的AI视频创作模型D&S-AI Video于3月25日正式亮相,并成功集成至迪思
    的头像 发表于 03-26 11:46 364次阅读

    Stability AI推出全新Stable Video 3D模型

    近日,Stability AI 推出了全新的 Stable Video 3D 模型,该模型以其独特的功能吸引了众多关注。此模型具备从单张图像中生成多视图3D视频的能力,为视频制作领域带
    的头像 发表于 03-22 10:30 167次阅读

    Stability AI推出Stable Video 3D模型,可制作多视角3D视频

    SV3D_u是Stable Video 3D的一个版本,仅需单幅图片即可生成运动轨迹视频,无须进行相机调整。扩充版本的SV3D_p加入了轨道视图的特性,使其可以根据预设的相机路径创建3D视频
    的头像 发表于 03-21 14:57 94次阅读

    浅谈S-VIDEO接口静电浪涌防护

    等。 现在S-video接口广泛应用于电视、监视器、摄像机、录像机等视频设备中,提供了比传统的复合视频接口更好的视频质量。使用S-video
    的头像 发表于 03-03 17:03 185次阅读
    浅谈S-<b class='flag-5'>VIDEO</b>接口静电浪涌防护

    电子发烧友论坛获得机械工业出版社合作伙伴

    的学习需求。再次感谢机械工业出版社对我们工作的肯定和支持,期待我们在未来的合作中取得更加辉煌的成果。 历史书籍评测活动回顾: 【书籍评测活动NO1】一本书,汇聚华为、旷视、高通等主流厂商的AI技术
    发表于 01-22 10:17

    什么是AI视频识别分析

    视频AI识别分析是指利用人工智能技术对视频数据进行智能化检测、分析和提取有用信息的过程。通过视频
    的头像 发表于 12-02 08:26 811次阅读
    什么是<b class='flag-5'>AI</b><b class='flag-5'>视频</b>识别分析

    深兰轮腿家用AI机器人荣获“2023年度城市更新科创大奖”

    近日,“2023金砖论坛·第五季金立方城市更新科创大会”在上海举行,会上发布了《第12届金砖价值榜》,深兰科技研发出品的轮腿式家用AI机器人(兰宝),因其AI技术的创新性应用,荣获了“2023年度
    的头像 发表于 11-09 10:37 376次阅读

    【KV260视觉入门套件试用体验】Vitis-AI加速的YOLOX视频目标检测示例体验和原理解析

    Vitis AI图像分类示例程序 - 智能硬件论坛 - 电子技术论坛 - 广受欢迎的专业电子论坛! (elecfans.com) 2.3 编译YOLOX视频目标检测示例程序 KV260使用DPU镜像的SD卡
    发表于 10-06 23:32

    AI智能呼叫中心

    随着科技的飞速发展,人工智能(AI)已经成为了各行各业的关键技术,其中,AI智能呼叫中心的出现,给传统的呼叫中心带来了巨大的改变与创新,本文将探讨A
    发表于 09-20 17:53

    深兰科技与西班牙BOMAPA集团签署AI工业解决方案合作协议

    近日,深兰科技集团与西班牙BOMAPA SERVICES SL.集团在深兰科技上海总部大厦正式签署AI工业解决方案合作协议。
    的头像 发表于 09-14 17:50 832次阅读

    深兰科技入围“虎嗅·大鲸榜2023工业AI高成长科技公司TOP30”

    9月7日,虎嗅智库主办的“虎嗅2023工业AI大会”,在苏州工业园顺利召开,众多优秀工业AI企业齐聚一堂,共同探讨当下人工
    发表于 09-13 09:24 256次阅读
    <b class='flag-5'>深兰</b>科技入围“虎嗅·大鲸榜2023<b class='flag-5'>工业</b><b class='flag-5'>AI</b>高成长科技公司TOP30”

    深兰科技用AI守护青年人的心理健康

    8月14日上午,“2023树洞救援年会”在上海举行,会上举行了“心理健康人工智能产学研创新联盟”的签约和揭牌仪式。“树洞行动救援团”创始人深兰科学院智能科学首席科学家、荷兰阿姆斯特丹自由大学人工
    的头像 发表于 08-16 10:55 917次阅读

    AI 人工智能的未来在哪?

    人工智能AI智能大模型已经孵化;繁衍过程将突飞猛进,ChatGPT已经上线。 世界首富马斯克认为AI对人类是一种威胁;谷歌前CEO施密特认为AI
    发表于 06-27 10:48

    AI视觉检测在工业领域的应用

    随着制造业的智能化、自动化程度越来越高,AI视觉检测系统已经成为一种重要的智能制造设备,它能够大幅提高生产线上的检测能力和效率。 一、AI视觉检测系统的作用
    发表于 06-15 16:21

    150套开发板免费送!还有5G手机拿?米尔RZ/G2L开发板创意秀

    ? 本次活动由米尔电子和瑞萨联合举办,除免费开发板之外,提供产品开发的作品,有机会赢得大奖,奖品非常丰富: 最佳项目 :3名;奖品:价值2500元左右的智能手机; 优秀设计奖 :5名;奖品:价值
    发表于 05-24 16:36