0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

卷积神经网络基础知识科普

NVIDIA英伟达 来源:NVIDIA英伟达 作者:NVIDIA英伟达 2022-05-13 10:26 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

卷积神经网络是一种深度学习网络,主要用于识别图像和对其进行分类,以及识别图像中的对象。

什么是卷积神经网络?

人工神经网络是一个硬件和/或软件系统,模仿神经元在人类大脑中的运转方式。卷积神经网络 (CNN) 通常会在多个全连接或池化的卷积层中应用多层感知器(对视觉输入内容进行分类的算法)的变体。

CNN 的学习方式与人类相同。人类出生时并不知道猫或鸟长什么样。随着我们长大成熟,我们学到了某些形状和颜色对应某些元素,而这些元素共同构成了一种元素。学习了爪子和喙的样子后,我们就能更好地区分猫和鸟。

神经网络的工作原理基本也是这样。通过处理标记图像的训练集,机器能够学习识别元素,即图像中对象的特征。

CNN 是颇受欢迎的深度学习算法类型之一。卷积是将滤波器应用于输入内容的简单过程,会带来以数值形式表示的激活。通过对图像反复应用同一滤波器,会生成名为特征图的激活图。这表示检测到的特征的位置和强度。

卷积是一种线性运算,需要将一组权重与输入相乘,以生成称为滤波器的二维权重数组。如果调整滤波器以检测输入中的特定特征类型,则在整个输入图像中重复使用该滤波器可以发现图像中任意位置的特征。

5788b818-d1df-11ec-bce3-dac502259ad0.png

例如,一个滤波器用于检测特定形状的曲线,另一个滤波器用于检测垂直线,第三个滤波器用于检测水平线。其他滤波器可以检测颜色、边缘和光线强度。连接多个滤波器的输出,即可以表示与训练数据中的已知元素匹配的复杂形状。

CNN 通常由三层组成:1) 输入层、2) 输出层和 3) 包含多个卷积层的隐藏层,其中隐藏层为池化层、全连接层和标准化层。

57c85568-d1df-11ec-bce3-dac502259ad0.png

第一层通常用于捕捉边缘、颜色、梯度方向和基本几何形状等基本特征。添加层后,此模型会填充高级特征,这些特征会逐渐确定一个大型棕色图块,首先是车辆,然后是汽车,然后是别克。

池化层会逐渐缩小表示的空间的大小,提高计算效率。池化层会单独对每个特征图进行运算。池化层中常用的方法是最大池化,即捕捉数组的最大值,从而减少计算所需的值的数量。堆叠卷积层允许将输入分解为其基本元素。

标准化层会对数据进行正则化处理,以改善神经网络的性能和稳定性。标准化层通过将所有输入都转换为均值为 0 且方差为 1,从而使每个层的输入更便于管理。

全连接层用于将一层中的各个神经元与另一层中的所有神经元相连。

581082a2-d1df-11ec-bce3-dac502259ad0.png

为什么选择卷积神经网络?

神经网络有三种基本类型:

多层感知器擅长使用标记输入处理分类预测问题。它们是可应用于各种场景(包括图像识别)的灵活网络。

时间递归神经网络使用一个或多个步长作为输入,并以多个步长作为输出,针对序列预测问题进行了优化。它们擅长解读时间序列数据,但对图像分析无效。

卷积神经网络专为将图像数据映射到输出变量而设计。它们特别擅长发掘二维图像的内部表征,可用于学习位置和尺寸不变的结构。这使得它们特别擅长处理具有空间关系组件的数据。

CNN 已成为许多先进深度学习(例如面部识别、手写识别和文本数字化)方面的计算机视觉应用程序的首选模型。此外,它还可应用于推荐系统。2012 年 CNN 迎来了转折点,当时多伦多大学研究生 Alex Krizhevsky 使用 CNN 模型将分类错误记录从 26% 降低至 15%,在当年的 ImageNet 竞赛中获胜,这一成绩在当时令人震惊。

事实证明,在涉及图像处理的应用场合,CNN 模型能够带来出色结果和超高计算效率。虽然 CNN 模型并不是适合此领域的唯一深度学习模型,但这是大家共同的选择,并且将成为未来持续创新的焦点。

关键用例

CNN 是目前机器用来识别物体的图像处理器。CNN 已成为当今自动驾驶汽车、石油勘探和聚变能研究领域的眼睛。在医学成像方面,它们可以帮助更快速发现疾病并挽救生命。

得益于 CNN 和递归神经网络 (RNN),各种 AI 驱动型机器都具备了像我们眼睛一样的能力。经过在深度神经网络领域数十年的发展以及在处理海量数据的 GPU 高性能计算方面的长足进步,大部分 AI 应用都已成为可能。

卷积神经网络的重要意义

数据科学团队

图像识别应用范围广,是许多数据科学团队必备的核心能力。CNN 是一项成熟的标准,可为数据科学团队提供技能基准,让他们可以学习并掌握这些技能,以满足当前和未来的图像处理需求。

数据工程团队

了解 CNN 处理所需训练数据的工程师可以提前一步满足组织需求。数据集采用规定的格式,并且工程师可以通过大量公开的数据集进行学习。这简化了将深度学习算法投入生产的过程。

借助 GPU 加速卷积神经网络

先进的神经网络可能有数百万乃至十亿以上的参数需要通过反向传播进行调整。此外,它们需要大量的训练数据才能实现较高的准确度,这意味着成千上万乃至数百万的输入样本必须同时进行向前和向后传输。由于神经网络由大量相同的神经元构建而成,因此本质上具有高度并行性。这种并行性会自然映射到 GPU,因此相比仅依赖 CPU 的训练,计算速度会大幅提高。

通过深度学习框架,研究人员能轻松创建和探索卷积神经网络 (CNN) 和其他深度神经网络 (DNN),同时达到实验和工业部署所需的较高速度。NVIDIA 深度学习 SDK 可加快 Caffe、CNTK、TensorFlow、Theano 和 Torch 等广泛使用的深度学习框架以及众多其他机器学习应用程序的运行速度。

深度学习框架在 GPU 上的运行速度更快,并可以在单个节点内的多个 GPU 间扩展。为了将框架与 GPU 结合使用以进行卷积神经网络训练和推理过程,NVIDIA 分别提供了 cuDNN 和 TensorRT。cuDNN 和 TensorRT 可大幅优化卷积层、池化层、标准化层和激活层等标准例程的实施。

为快速开发和部署视觉模型,NVIDIA 面向视觉 AI 开发者提供了 DeepStream SDK,同时面向计算机视觉领域提供了 TAO 工具套件,用于创建准确且高效的 AI 模型。

原文标题:NVIDIA 大讲堂 | 什么是卷积神经网络?

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    5496

    浏览量

    109119
  • 深度学习
    +关注

    关注

    73

    文章

    5591

    浏览量

    123926
  • 卷积神经网络

    关注

    4

    文章

    371

    浏览量

    12730

原文标题:NVIDIA 大讲堂 | 什么是卷积神经网络?

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    自动驾驶中常提的卷积神经网络是个啥?

    在自动驾驶领域,经常会听到卷积神经网络技术。卷积神经网络,简称为CNN,是一种专门用来处理网格状数据(比如图像)的深度学习模型。CNN在图像处理中尤其常见,因为图像本身就可以看作是由像
    的头像 发表于 11-19 18:15 1853次阅读
    自动驾驶中常提的<b class='flag-5'>卷积</b><b class='flag-5'>神经网络</b>是个啥?

    CNN卷积神经网络设计原理及在MCU200T上仿真测试

    数的提出很大程度的解决了BP算法在优化深层神经网络时的梯度耗散问题。当x&gt;0 时,梯度恒为1,无梯度耗散问题,收敛快;当x&lt;0 时,该层的输出为0。 CNN
    发表于 10-29 07:49

    NMSIS神经网络库使用介绍

    :   神经网络卷积函数   神经网络激活函数   全连接层函数   神经网络池化函数   Softmax 函数   神经网络支持功能
    发表于 10-29 06:08

    卷积运算分析

    的数据,故设计了ConvUnit模块实现单个感受域规模的卷积运算. 卷积运算:不同于数学当中提及到的卷积概念,CNN神经网络中的卷积严格意义
    发表于 10-28 07:31

    在Ubuntu20.04系统中训练神经网络模型的一些经验

    模型。 我们使用MNIST数据集,训练一个卷积神经网络(CNN)模型,用于手写数字识别。一旦模型被训练并保存,就可以用于对新图像进行推理和预测。要使用生成的模型进行推理,可以按照以下步骤进行操作: 1.
    发表于 10-22 07:03

    CICC2033神经网络部署相关操作

    读取。接下来需要使用扩展指令,完成神经网络的部署,此处仅对第一层卷积+池化的部署进行说明,其余层与之类似。 1.使用 Custom_Dtrans 指令,将权重数据、输入数据导入硬件加速器内。对于权重
    发表于 10-20 08:00

    液态神经网络(LNN):时间连续性与动态适应性的神经网络

    1.算法简介液态神经网络(LiquidNeuralNetworks,LNN)是一种新型的神经网络架构,其设计理念借鉴自生物神经系统,特别是秀丽隐杆线虫的神经结构,尽管这种微生物的
    的头像 发表于 09-28 10:03 713次阅读
    液态<b class='flag-5'>神经网络</b>(LNN):时间连续性与动态适应性的<b class='flag-5'>神经网络</b>

    卷积神经网络如何监测皮带堵料情况 #人工智能

    卷积神经网络
    jf_60804796
    发布于 :2025年07月01日 17:08:42

    自动驾驶感知系统中卷积神经网络原理的疑点分析

    背景 卷积神经网络(Convolutional Neural Networks, CNN)的核心技术主要包括以下几个方面:局部连接、权值共享、多卷积核以及池化。这些技术共同作用,使得CNN在图像
    的头像 发表于 04-07 09:15 659次阅读
    自动驾驶感知系统中<b class='flag-5'>卷积</b><b class='flag-5'>神经网络</b>原理的疑点分析

    BP神经网络卷积神经网络的比较

    BP神经网络卷积神经网络在多个方面存在显著差异,以下是对两者的比较: 一、结构特点 BP神经网络 : BP神经网络是一种多层的前馈
    的头像 发表于 02-12 15:53 1346次阅读

    BP神经网络的优缺点分析

    BP神经网络(Back Propagation Neural Network)作为一种常用的机器学习模型,具有显著的优点,同时也存在一些不容忽视的缺点。以下是对BP神经网络优缺点的分析: 优点
    的头像 发表于 02-12 15:36 1613次阅读

    什么是BP神经网络的反向传播算法

    BP神经网络的反向传播算法(Backpropagation Algorithm)是一种用于训练神经网络的有效方法。以下是关于BP神经网络的反向传播算法的介绍: 一、基本概念 反向传播算法是BP
    的头像 发表于 02-12 15:18 1299次阅读

    BP神经网络与深度学习的关系

    BP神经网络与深度学习之间存在着密切的关系,以下是对它们之间关系的介绍: 一、BP神经网络的基本概念 BP神经网络,即反向传播神经网络(Backpropagation Neural N
    的头像 发表于 02-12 15:15 1364次阅读

    BP神经网络的基本原理

    BP神经网络(Back Propagation Neural Network)的基本原理涉及前向传播和反向传播两个核心过程。以下是关于BP神经网络基本原理的介绍: 一、网络结构 BP神经网络
    的头像 发表于 02-12 15:13 1548次阅读

    人工神经网络的原理和多种神经网络架构方法

    在上一篇文章中,我们介绍了传统机器学习的基础知识和多种算法。在本文中,我们会介绍人工神经网络的原理和多种神经网络架构方法,供各位老师选择。 01 人工神经网络   人工
    的头像 发表于 01-09 10:24 2272次阅读
    人工<b class='flag-5'>神经网络</b>的原理和多种<b class='flag-5'>神经网络</b>架构方法