0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

华为物体检测系统助力智慧安防

我快闭嘴 来源:爱集微 作者:嘉德IPR 2020-11-22 09:19 次阅读

华为发明的物体检测方法,通过构建跨域知识图谱,可以捕捉到不同待检测物体间的内在关系,从而更加精确的进行物体识别,在智能安防等复杂场景中有着极其重要的应用。

2020年10月,由华为技术有限公司主办、成都优普诚科技有限公司协办的“普惠AI,破浪前行”2020华为好望秋季品鉴会在成都首座万豪酒店成功举办,该会就机器视觉、智慧安防等领域展开了交流讨论。

其中华为的机器视觉技术尤其适合应用在智慧安防等领域,尤其是在AI技术的加持下,可以让安防变得更加的省心且智能。例如,物体检测就是一项基本的计算机视觉任务,它可以识别图像中物体的位置和类别。在实际应用中,研究员和工程师们会根据应用场景与实际任务需求的不同创建针对不同具体问题的数据集,用于训练高度定制化和独特的自动物体检测器。

而在智慧安防领域,物体检测也是非常重要的一个环节,在进行很多任务之前,首要的就是将待检测物体定位并进行类别识别。为此,华为在20年1月21日申请了一项名为“一种物体检测方法、装置以及存储介质”的发明专利(申请号:202010072238.0),申请人为华为技术有限公司。

该专利中发明的系统可以应用在大规模物体检测场景中,例如手机人脸识别、手机识别万物、无人车的感知系统、安防摄像头、社交网站照片物体识别、智能机器人等等。同时,由于这种物体检测方法在对物体进行检测时结合了跨域知识图谱,因此其物体检测效果会更好。

根据该专利目前公开的资料,让我们一起来看看这项物体检测方法吧。

华为物体检测系统助力智慧安防

如上图,为该专利中发明的系统架构的结构示意图,该架构中包括执行设备110、训练设备12、数据库130、客户设备140、数据存储系统150以及数据采集设备160。数据采集设备可以采集训练数据,并将数据存入数据库中,但是这种用于人工智能训练的数据需要进行人工标注。

训练设备可以根据训练数据训练出目标检测模型,当其他未知的图片由用户传递到计算模块时,就可以由目标模型来进行识别,从而得到物体的类别信息,并将物体的检测结果通过I/O接口呈现给客户设备。

华为物体检测系统助力智慧安防

如上图,为这种芯片硬件结构图解,该芯片主要包括神经网络处理器,主CPU和外部存储器分别用于提供控制指令以及数据。配合系统架构图可知,这种芯片就是训练设备120中所使用的,可以完成训练设备的训练任务并输出物体的类型信息。

神经网络处理器NPU作为协处理器挂载到主中央处理器上,由主CPU分配任务,NPU的核心部分为运算电路303,控制器304控制运算电路提取存储器中的数据并进行运算。

我们知道在神经网络的计算中是需要大量的矩阵乘加运算的。举例来说,假设有输入矩阵A,权重矩阵B,输出矩阵C,运算电路从权重存储器中取矩阵B相应的数据,并缓存在运算电路中每一个PE上。运算电路从输入存储器中取矩阵A数据与矩阵B进行矩阵运算,得到的矩阵的部分结果或最终结果,保存在累加器中。

向量计算单元可以对运算电路的输出做进一步处理,如:向量乘、加、指数运算、对数运算以及大小比较等等,例如向量计算单元可以用于神经网络中非卷积的网络计算(池化、批归一化),这些结构则正是进行AI运算的基础。

华为物体检测系统助力智慧安防

如上图,为该专利中申请的物体检测方法的识别步骤的流程图,首先系统会获取待检测的图像,图像可以通过摄像头拍摄从街景等场合提取。接着确定待检测图像中的待检测物体的初始图像特征,这个步骤中,可以对整个图像进行卷积运算以得到整个图像的图像特征,然后再从整个图像的特征图中获取物体的初始图像特征。

接着根据跨域知识图谱信息来确定待检测物体的增强图像特征,这个跨域知识图谱信息包括不同域中待检测物体对应的物体类别之间的关联关系,增强图像特征指示不同域中与待检测物体相关联的其他物体对应的物体类别的语义信息,这种对应关系如下图所示。

华为物体检测系统助力智慧安防

从上图可以看到,这种对应关系即:两个类别在同一个图像中同时出现的概率越大,则认为两个类别之间有关联关系。上图的第一个域中的物体类别包括男人、女人、男孩、女孩和马路;街道第二个域中的物体类别包括人、手提包、书包、汽车和卡车。

我们认为第一个域中的男人、女人、男孩以及女孩与第二个域中的人之间具有关联关系,第一个域中的女人和女孩与第二个域中的手提包具有关联关系。这些关联信息是通过常识来推理出来的,这样的语义信息可以辅助进行图像检测的高级别信息。例如,待检测物体为女人,待检测图像中与女人相关联的其他物体包括手提包,那么,待检测物体的增强图像特征指示的可以是手提包的语义信息。

华为物体检测系统助力智慧安防

最后,我们再来看看这种物体检测方法的整体流程图,待检测图像可以先通过传统的物体检测器进行处理(例如Faster-RCNN网络结构),再提取初始候选区域的初始图像特征以及分类层的参数,并构建域内的区域图。

通过构建域内的区域图,利用域间图卷积网络传播节点上不同域下待检测物体的高级语义表示,得到经过推理推断后的融合了不同域下待检测物体高级语义表示的特征。最后将域内图卷积、域间图卷积经过推理推断后得到的特征投影到相应的待检测物体的高级语义表示中,并进行分类和回归,由此来得到待检测物体的位置信息以及类别信息。

以上就是华为发明的物体检测方法,通过构建跨域知识图谱,可以捕捉到不同待检测物体间的内在关系,由此来提高物体检测方法的效果。这种方法可以应用在复杂场景下,例如在商场以及商业街等区域,可以辅助安保人员对该区域的行人、物体进行检测,例如可以帮助寻找遗失物品以及进行可以物体检测等,有效提高城市安防能力!

关于嘉德

深圳市嘉德知识产权服务有限公司由曾在华为等世界500强企业工作多年的知识产权专家、律师、专利代理人组成,熟悉中欧美知识产权法律理论和实务,在全球知识产权申请、布局、诉讼、许可谈判、交易、运营、标准专利协同创造、专利池建设、展会知识产权、跨境电商知识产权、知识产权海关保护等方面拥有丰富的经验。
责任编辑:tzh

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 华为
    +关注

    关注

    215

    文章

    33892

    浏览量

    247911
  • AI
    AI
    +关注

    关注

    87

    文章

    27304

    浏览量

    265037
  • 人脸识别
    +关注

    关注

    76

    文章

    3971

    浏览量

    80913
收藏 人收藏

    评论

    相关推荐

    纵观全局:YOLO助力实时物体检测原理及代码

    YOLO 流程的最后一步是将边界框预测与类别概率相结合,以提供完整的检测输出。每个边界框的置信度分数由类别概率调整,确保检测既反映边界框的准确性,又反映模型对对象类别的置信度。
    的头像 发表于 03-30 14:43 1416次阅读

    红外气体检测仪的工作原理 红外气体检测仪的使用方法

    红外气体检测仪是一种常用的气体检测装置,通过测量目标气体在红外光谱范围内的吸收特性来实现气体的检测。红外气体检测仪具有高精度、快速响应、稳定性好等优点,广泛应用于工业和环境监测领域。
    的头像 发表于 02-01 16:52 807次阅读

    体检测仪手持终端定制_便携式多种气体检测

    体检测仪手持终端定制_便携式多种气体检测仪|气体检测仪方案。手持气体检测仪终端在工业施工等领域具有重要的作用。该仪器可以有效地检测到可燃气
    的头像 发表于 01-23 19:44 617次阅读
    气<b class='flag-5'>体检测</b>仪手持终端定制_便携式多种气<b class='flag-5'>体检测</b>仪

    实现稳定物体检测所需的光电传感器选择方法和使用方法

    使用反射型传感器时,应用上的各种要素将会影响光电传感器的物体检测。尤其对于黑色物体、光泽物体及透明物体等,使用传统光电传感器难以实现稳定的检测
    的头像 发表于 01-13 08:23 395次阅读
    实现稳定<b class='flag-5'>物体检测</b>所需的光电传感器选择方法和使用方法

    基于51单片机的酒精气体检测器设计

    基于51单片机的酒精气体检测器设计(实物)
    发表于 01-02 09:40 7次下载

    基于磁学检测体系的肿瘤外泌体检测系统,为肿瘤标志物检测提供新技术

    近日,中国科学院上海微系统与信息技术研究所第八研究室宓现强课题组与上海科技大学叶朝锋课题组共同开发了一套基于新型磁学检测体系的肿瘤外泌体检测系统。研究人员构建了由芯片模块、流控模块和磁
    的头像 发表于 11-12 09:37 433次阅读
    基于磁学<b class='flag-5'>检测</b>体系的肿瘤外泌<b class='flag-5'>体检测</b><b class='flag-5'>系统</b>,为肿瘤标志物<b class='flag-5'>检测</b>提供新技术

    医疗应用中液体检测解决方案

    体检测在许多不同的医疗应用(例如输液泵和 CPAP 呼吸机)中都非常有用,在这些应用中,监测分配的流体或液体位置不仅对系统的运行至关重要,而且对患者的健康也至关重要。有各种位置检测技术可供使用
    的头像 发表于 09-05 11:17 547次阅读
    医疗应用中液<b class='flag-5'>体检测</b>解决方案

    隧道气体检测系统:我们真的需要它吗?

    随着城市化进程的加快,隧道的建设和使用越来越频繁。但是,你是否知道这些封闭的空间可能会积聚有害气体?这就是为什么我们需要隧道气体检测系统的原因。但是,我们真的需要这样的系统吗?本文将探讨这个
    的头像 发表于 08-18 11:17 431次阅读

    一文了解便携式气体检测

    便携式气体检测仪是一种用于检测环境中气体浓度的设备,具有体积小、便于携带、操作简便等特点。无论是在工业生产、科研实验,还是在日常生活中,便携式气体检测仪都是我们的重要安全保障工具。下面,让我们一起
    的头像 发表于 08-08 14:56 934次阅读

    DSGW-090 PoE(以太网供电)网关用于智能家居、智能智慧养老服务

    智能
    东胜物联
    发布于 :2023年08月04日 13:32:18

    华为坤灵助力苏州龙光花溪澜园智慧化管理

    关注华为行业感知了解更多动态 · · 原文标题:华为坤灵助力苏州龙光花溪澜园智慧化管理 文章出处:【微信公众号:华为机器视觉】欢迎添加关注!
    的头像 发表于 08-04 08:15 422次阅读
    <b class='flag-5'>华为</b>坤灵<b class='flag-5'>助力</b>苏州龙光花溪澜园<b class='flag-5'>智慧</b>化管理

    宝安气体检测仪厂家:气体检测仪生产中心

    深圳宝安区,作为中国的重要电子制造业基地,拥有众多生产各种高科技设备的制造商,其中就包括气体检测仪的生产厂家。这些厂家凭借先进的生产设备、严谨的生产工艺和高素质的研发团队,生产出的气体检测仪广受全球
    的头像 发表于 07-28 16:23 455次阅读

    华为坤灵助力武汉利加华庭打造智慧小区

    关注华为行业感知了解更多动态 · · 原文标题:华为坤灵助力武汉利加华庭打造智慧小区 文章出处:【微信公众号:华为机器视觉】欢迎添加关注!文
    的头像 发表于 07-27 08:10 556次阅读
    <b class='flag-5'>华为</b>坤灵<b class='flag-5'>助力</b>武汉利加华庭打造<b class='flag-5'>智慧</b>小区

    华为云ModelArts入门开发(完成物体分类、物体检测)

    利用ModelArts框架可以完成图像分类、物体检测、预测分析、声音分类、文本分类等功能。介绍如何使用ModelArts完成图像分类、物体检测、自我学习等功能运用。
    的头像 发表于 07-10 16:26 1397次阅读
    <b class='flag-5'>华为</b>云ModelArts入门开发(完成<b class='flag-5'>物体</b>分类、<b class='flag-5'>物体检测</b>)

    如何选购深圳乙炔气体检测仪?

    为确保工业生产环境的安全,选购合适的深圳乙炔气体检测仪至关重要。本文将介绍选购深圳乙炔气体检测仪的关键因素和实用建议,帮助企业购买到合适的设备。 1. 选购深圳乙炔气体检测仪的关键因素 在选购深圳
    的头像 发表于 07-06 11:47 251次阅读