0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

卷积神经网络层级结构 卷积神经网络的卷积层讲解

工程师邓生 来源:未知 作者:刘芹 2023-08-21 16:49 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

卷积神经网络层级结构 卷积神经网络的卷积层讲解

卷积神经网络(Convolutional Neural Network,CNN)是一种基于深度学习的神经网络模型,在许多视觉相关的任务中表现出色,如图像分类、目标检测、人脸识别等。卷积神经网络的核心是卷积层和池化层,它们构成了网络的主干,实现了对图像特征的提取和抽象。

一、卷积神经网络的层级结构

卷积神经网络主要分为四个层级,分别是输入层、卷积层、池化层和全连接层。

1. 输入层

输入层是卷积神经网络的第一层,接收原始图像数据并将其用张量的形式传入神经网络。通常情况下,输入层的尺寸等于原始图像的尺寸,颜色通道数为1或3。

2. 卷积层

卷积层是卷积神经网络中最关键的一层,它通过卷积运算来提取图像的特征。卷积操作是通过卷积核(Filter)与输入信号进行卷积运算而完成的,每个卷积核可以提取一种特定的特征。

在卷积层中,我们可以设置多组卷积核,每组卷积核可以提取不同的特征。每个卷积核的大小和步长可以根据实际需要进行调整,卷积操作通常采用“same”或“valid”两种方式,其中“same”表示输入和输出的大小相同,“valid”表示输出的大小比输入小。

卷积层的输出通过激活函数进行激活,常用的激活函数有ReLU、Sigmoid、Tanh等。

3. 池化层

池化层是卷积神经网络中的另一个重要层级,它的主要作用是对卷积层的输出进行下采样,从而减少参数数量,提高模型计算效率。池化层通常采用最大池化或平均池化操作。

最大池化是指从池化窗口中选择最大值作为输出,而平均池化是指从池化窗口中取平均值作为输出。池化层通常不改变通道数量,但可以减少特征图的尺寸,通常采用“same”或“valid”两种方式。

4. 全连接层

全连接层是卷积神经网络中的最后一层,它的作用是将卷积层和池化层输出的特征图转换为分类或回归结果,通常使用Softmax或Sigmoid函数进行激活。

二、卷积神经网络的卷积层讲解

卷积层是卷积神经网络中最重要的一层,它通过卷积运算来提取图像的特征。在卷积层中,存在多个卷积核,每个卷积核可以提取不同的特征。

1. 卷积层的输入输出

卷积层的输入是一个张量,通常是一个四维张量,其形状为(batch_size, height, width, channels),其中batch_size表示训练时每组输入的数量,height和width表示输入的图像尺寸,channels表示输入的通道数量。

卷积层的输出也是一个张量,其形状与输入张量相似,但是通道数量可能不同。在卷积层中,经过卷积操作后,图像的尺寸可能会发生变化,通常通过填充(Padding)和步长(Stride)来调整输出的尺寸。

2. 卷积核

卷积核是卷积层的核心,每个卷积核代表一个特定的特征提取器,可以提取图像中某种局部特征。对于输入的每个通道,都有一个对应的卷积核。

卷积核通常是一个权重矩阵,其大小可以根据需要进行调整。在卷积操作中,卷积核以固定的步长在输入张量上滑动,对输入张量的某个局部区域进行卷积运算。

卷积核的值是随机初始化的,随着训练的进行,卷积核的值逐渐调整,以使得卷积层的输出更好地对应输入数据的特征。

3. 填充和步长

填充和步长是卷积操作中常用的调整参数,它们可以控制输出特征图的尺寸。填充是在输入张量的边缘周围添加额外的像素值,以保持输出张量与输入张量相同的尺寸。

填充可以有效地减少图像边缘的信息丢失,通常分为“same”和“valid”两种方式。其中,“same”表示填充后的输出特征图与输入张量的大小相同,“valid”表示不进行填充,输出特征图的尺寸将会使输入尺寸减小。

步长是指卷积核在输入张量上移动的步长,通常设定为一个大于1的整数。步长可以有效地控制输出特征图的尺寸,通常使用“same”或“valid”方式来调整输出尺寸。

4. 激活函数

卷积神经网络中的卷积层通常使用激活函数来增加模型的非线性性。激活函数接收卷积层的输出并进行激活,将非线性的输入映射为非线性的输出。

常用的激活函数有ReLU、Sigmoid、Tanh等。ReLU是指整流线性单元,其具有简单快速、可微分等优点,广泛应用于卷积神经网络中。Sigmoid和Tanh函数通常用于二分类问题和回归问题。

总结

卷积神经网络是一种具有强大特征提取能力的神经网络模型。卷积层是卷积神经网络的核心组成部分,负责特征提取和表示。

在卷积层中,通过卷积核对输入张量进行卷积运算,从而提取具有抽象义的特征,同时可以通过填充和步长等参数进行灵活调整。卷积层的输出通常使用激活函数进行激活,并通过池化层转化为更小的特征图。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 神经网络
    +关注

    关注

    42

    文章

    4827

    浏览量

    106767
  • 卷积神经网络

    关注

    4

    文章

    371

    浏览量

    12713
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    自动驾驶中常提的卷积神经网络是个啥?

    在自动驾驶领域,经常会听到卷积神经网络技术。卷积神经网络,简称为CNN,是一种专门用来处理网格状数据(比如图像)的深度学习模型。CNN在图像处理中尤其常见,因为图像本身就可以看作是由像
    的头像 发表于 11-19 18:15 1825次阅读
    自动驾驶中常提的<b class='flag-5'>卷积</b><b class='flag-5'>神经网络</b>是个啥?

    CNN卷积神经网络设计原理及在MCU200T上仿真测试

    数的提出很大程度的解决了BP算法在优化深层神经网络时的梯度耗散问题。当x&gt;0 时,梯度恒为1,无梯度耗散问题,收敛快;当x&lt;0 时,该的输出为0。 CNN
    发表于 10-29 07:49

    NMSISI库的使用

    :   神经网络卷积函数   神经网络激活函数   全连接函数   神经网络池化函数   Softmax 函数   
    发表于 10-29 07:07

    NMSIS神经网络库使用介绍

    :   神经网络卷积函数   神经网络激活函数   全连接函数   神经网络池化函数   Softmax 函数   
    发表于 10-29 06:08

    构建CNN网络模型并优化的一般化建议

    整个模型非常巨大。所以要想实现轻量级的CNN神经网络模型,首先应该避免尝试单层神经网络。 2)减少卷积核的大小:CNN神经网络是通过权值共享的方式,利用
    发表于 10-28 08:02

    卷积运算分析

    的数据,故设计了ConvUnit模块实现单个感受域规模的卷积运算. 卷积运算:不同于数学当中提及到的卷积概念,CNN神经网络中的卷积严格意义
    发表于 10-28 07:31

    在Ubuntu20.04系统中训练神经网络模型的一些经验

    , batch_size=512, epochs=20)总结 这个核心算法中的卷积神经网络结构和训练过程,是用来对MNIST手写数字图像进行分类的。模型将图像作为输入,通过卷积和池化
    发表于 10-22 07:03

    CICC2033神经网络部署相关操作

    读取。接下来需要使用扩展指令,完成神经网络的部署,此处仅对第一卷积+池化的部署进行说明,其余与之类似。 1.使用 Custom_Dtrans 指令,将权重数据、输入数据导入硬件加
    发表于 10-20 08:00

    卷积神经网络如何监测皮带堵料情况 #人工智能

    卷积神经网络
    jf_60804796
    发布于 :2025年07月01日 17:08:42

    自动驾驶感知系统中卷积神经网络原理的疑点分析

    背景 卷积神经网络(Convolutional Neural Networks, CNN)的核心技术主要包括以下几个方面:局部连接、权值共享、多卷积核以及池化。这些技术共同作用,使得CNN在图像
    的头像 发表于 04-07 09:15 639次阅读
    自动驾驶感知系统中<b class='flag-5'>卷积</b><b class='flag-5'>神经网络</b>原理的疑点分析

    BP神经网络网络结构设计原则

    BP(back propagation)神经网络是一种按照误差逆向传播算法训练的多层前馈神经网络,其网络结构设计原则主要基于以下几个方面: 一、层次结构 输入
    的头像 发表于 02-12 16:41 1247次阅读

    BP神经网络卷积神经网络的比较

    BP神经网络卷积神经网络在多个方面存在显著差异,以下是对两者的比较: 一、结构特点 BP神经网络 : BP
    的头像 发表于 02-12 15:53 1301次阅读

    BP神经网络与深度学习的关系

    ),是一种多层前馈神经网络,它通过反向传播算法进行训练。BP神经网络由输入、一个或多个隐藏和输出组成,通过逐
    的头像 发表于 02-12 15:15 1338次阅读

    BP神经网络的基本原理

    BP神经网络(Back Propagation Neural Network)的基本原理涉及前向传播和反向传播两个核心过程。以下是关于BP神经网络基本原理的介绍: 一、网络结构 BP神经网络
    的头像 发表于 02-12 15:13 1504次阅读

    人工神经网络的原理和多种神经网络架构方法

    在上一篇文章中,我们介绍了传统机器学习的基础知识和多种算法。在本文中,我们会介绍人工神经网络的原理和多种神经网络架构方法,供各位老师选择。 01 人工神经网络   人工神经网络模型之所
    的头像 发表于 01-09 10:24 2232次阅读
    人工<b class='flag-5'>神经网络</b>的原理和多种<b class='flag-5'>神经网络</b>架构方法