[人工智能-深度学习-27]:卷积神经网络cnn-核心概念(卷积滑动填充参数共享通道)

文火冰糖的硅基工坊 文火冰糖的硅基工坊     2023-01-14     542

关键词:

作者主页(文火冰糖的硅基工坊):文火冰糖(王文兵)的博客_文火冰糖的硅基工坊_CSDN博客

本文网址:https://blog.csdn.net/HiWangWenBing/article/details/120806277


目录

第1章 卷积中的“积”的定义

1.1 卷积中的“积”是内积

第2章 卷积中的“卷”的定义

2.1 在滑动中“卷”积

2.2 滑动的步长

第3章 边缘填充

3.1 Pading的基本思想来源

3.2 填充后的效果

3.3 边缘填充对输出的影响

第4章 单个卷积核的输出

4.1 单通的输出(X,Y)

4.2 多输入通道的合并

第5章 多个卷积核的输出:多通道输出

5.1  通道的拓展

5.2 每个输出通道来自一个卷积核

5.3 特征图:通道的本质是某一角度的特征

第6章 卷积的参数计算

6.1 特征图尺寸的计算公式

6.2 卷积核参数共享

第7章 卷积对图形变换

第8章 池化层

第9章 全连接的dropout


第1章 卷积中的“积”的定义

1.1 卷积中的“积”是内积

第2章 卷积中的“卷”的定义

2.1 在滑动中“卷”积

2.2 滑动的步长

 

 

 stride:反映的每次移动的像素点的个数。

 

备注:

步长与输入数据的尺寸,直接决定了卷积核输出的尺寸。

但在实际定义卷积神经网络时,通常预先定义的是卷积层的输出尺寸,因此,步长并不是程序员预先设定的超参数,而是自动计算。

步长是根据卷积层的程序员指定的输入尺寸、输出尺寸、卷积核的大小来进行推导出来的。

第3章 边缘填充

3.1 Pading的基本思想来源

除了输出的边缘被裁剪,同时输入数据的边缘数据点,被使用的机会也比中心点使用的机会少。

为了克服上述确定,需要在边缘外围进行填充,确保输入数据的所有点都是机会均等的,公平的。

 

3.2 填充后的效果

3.3 边缘填充对输出的影响

(1)边缘填充影响卷积输出的大小

(2)由于填充的是0,因此不影响边缘处的卷积的输出值。

第4章 单个卷积核的输出

4.1 单通的输出(X,Y)

(1)单个卷积核的每一次卷积的输出是一个点

(2)单个卷积核的所有卷积的输出是一个二维的输出(三个通道的合成),而不是一个点。

(3)多个卷积核的所有卷积的输出组成一个三维的输出,第三个维度的长度反映卷积核的个数

4.2 多输入通道的合并

多通道输入数据:通道的来源

RGB三个通道的合并,才阐述了整个图片的综合特征,因此,卷积的“积”会会三个通道的”积”进行累加合并。

 

 

 

第1层是第一个卷积核的输出。

第2层是第二个卷积核的输出。

第5章 多个卷积核的输出:多通道输出

5.1  通道的拓展

在输入图片时,通道是指:R,G,B三个颜色通道

在卷积层内部,通道是指:隶属于每个独立的神经元,通道数就是神经元的个数。

5.2 每个输出通道来自一个卷积核

 每个卷积核的输出图形,都被原始图形小,分别是原始图形中某一个种特征,是原始图形的部分信息,而不是全部像素信息。

5.3 特征图:通道的本质是某一角度的特征

第6章 卷积的参数计算

6.1 特征图尺寸的计算公式

6.2 卷积核参数共享

(1)参数共享的好处

参数共享能够很好的降低全连接网络的过拟合

参数共享也可以极大的降低参数的个数

(2)全连接网络中批量样本计算时的参数共享

(3)卷积核的参数共享

第7章 卷积对图形变换

 

第8章 池化层

备注:池化不进行矩阵运算,而只是选择部分数据输出。

 

 每个区域选择最大值:选择特征最大的值,是特征最明显的特征。

第9章 全连接的dropout


作者主页(文火冰糖的硅基工坊):文火冰糖(王文兵)的博客_文火冰糖的硅基工坊_CSDN博客

本文网址:https://blog.csdn.net/HiWangWenBing/article/details/120806277

[人工智能-深度学习-28]:卷积神经网络cnn-网络架构与描述方法

作者主页(文火冰糖的硅基工坊):文火冰糖(王文兵)的博客_文火冰糖的硅基工坊_CSDN博客本文网址:https://blog.csdn.net/HiWangWenBing/article/details/120806599目录第1章卷积神经网络总体概述1.1 什么是卷积神经网络1.2卷积... 查看详情

[人工智能-深度学习-32]:卷积神经网络cnn-常见分类网络-alexnet

...1.2卷积神经网络的核心要素1.3卷积神经网络的描述方法1.4人工智能 查看详情

[人工智能-深度学习-25]:卷积神经网络cnn-cs231n解读-卷积层详解

...xff09;的博客_文火冰糖的硅基工坊_CSDN博客本文网址:[人工智能-深度学习-25]:卷积神经网络CNN-CS231n解读-卷积层详解_文火冰糖(王文兵)的博客-CSDN博客目录第1章卷积神经网络概述第2章卷积核的局部连接性:... 查看详情

[人工智能-深度学习-26]:卷积神经网络cnn-为啥要卷积神经网络以及卷积神经网络的应用

作者主页(文火冰糖的硅基工坊):文火冰糖(王文兵)的博客_文火冰糖的硅基工坊_CSDN博客本文网址:https://blog.csdn.net/HiWangWenBing/article/details/120805258目录第1章 全连接网络的缺点第2章卷积神经网络的时思想起源第... 查看详情

[人工智能-深度学习-31]:卷积神经网络cnn-常见卷积神经网络综合比较大全

...;https://blog.csdn.net/HiWangWenBing/article/details/120835303目录第1章人工智能发展的3次浪潮1.1 人工智能的发展报告2011-20201.2来自其他途径第2章神经网络的演进历史2. 查看详情

[人工智能-深度学习-24]:卷积神经网络cnn-cs231n解读-卷积神经网络基本层级

...xff09;的博客_文火冰糖的硅基工坊_CSDN博客本文网址:[人工智能-深度学习-23]:卷积神经网络CNN-CS231n解读-卷积神经网络基本层级_文火冰糖(王文兵)的博客-CSDN博客 目录第1章CS321n卷积神经网络简介1.1 CS321n的简介... 查看详情

[人工智能-深度学习-22]:卷积神经网络cnn--单层神经网络的本质是矩阵相乘

...xff09;的博客_文火冰糖的硅基工坊_CSDN博客本文网址:[人工智能-深度学习-22]:卷积神经网络CNN--单层神经网络的本质是矩阵相乘_文火冰糖(王文兵)的博客-CSDN博客目录第1章单个神经的本质是一维矩阵(向量&#... 查看详情

[人工智能-深度学习-20]:卷积神经网络cnn-全连接网络的缺点与cnn的使命

作者主页(文火冰糖的硅基工坊):文火冰糖(王文兵)的博客_文火冰糖的硅基工坊_CSDN博客本文网址:https://blog.csdn.net/HiWangWenBing/article/details/120732872目录第1章全连接神经网络的缺点1.1什么是全连接网络1.2全连接网... 查看详情

[人工智能-深度学习-35]:卷积神经网络cnn-常见分类网络-googlenetincepetion网络架构分析与详解

...1.2卷积神经网络的核心要素1.3卷积神经网络的描述方法1.4人工智能 查看详情

[人工智能-深度学习-38]:卷积神经网络cnn-常见分类网络-resnet网络架构分析与详解

...1.2卷积神经网络的核心要素1.3卷积神经网络的描述方法1.4人工智能 查看详情

[人工智能-深度学习-33]:卷积神经网络cnn-常见分类网络-lenet网络结构分析与详解

...1.2卷积神经网络的核心要素1.3卷积神经网络的描述方法1.4人工智能 查看详情

[人工智能-深度学习-23]:卷积神经网络cnn-卷积核的本质是多维输入的神经元

作者主页(文火冰糖的硅基工坊):文火冰糖(王文兵)的博客_文火冰糖的硅基工坊_CSDN博客本文网址:https://blog.csdn.net/HiWangWenBing/article/details/120734529目录第1章预备核心概念1.1单个神经元的一维矩阵运算模型1.2神经... 查看详情

[人工智能-深度学习-29]:卷积神经网络cnn-全连接网络与卷积网络结构的互为等效与性能比较

作者主页(文火冰糖的硅基工坊):文火冰糖(王文兵)的博客_文火冰糖的硅基工坊_CSDN博客本文网址:https://blog.csdn.net/HiWangWenBing/article/details/120808864目录第1章单个全连接神经元与卷积核神经元的结构比较1.1全连接... 查看详情

[人工智能-深度学习-34]:卷积神经网络cnn-常见分类网络-vgg16/vgg19网络结构分析与详解

...1.2卷积神经网络的核心要素1.3卷积神经网络的描述方法1.4人工智能 查看详情

[人工智能-深度学习-30]:卷积神经网络cnn-感受野,特征的提取与范围的扩散

作者主页(文火冰糖的硅基工坊):文火冰糖(王文兵)的博客_文火冰糖的硅基工坊_CSDN博客本文网址:https://blog.csdn.net/HiWangWenBing/article/details/120833158目录第1章什么感受野1.1生物学对感受野的定义1.2卷积神经网络中... 查看详情

深度学习100例|第27天-卷积神经网络(cnn):艺术作品识别(代码片段)

...度学习|第四篇:配置PyTorch环境🚀往期精彩-卷积神经网络篇:深度学习100例-卷积神经网络(CNN)实现mnist手写数字识别|第1天深度学习100例-卷积神经网络(CNN&#x 查看详情

大话卷积神经网络(cnn)

...lNeuralNetworks,简称CNN)是推动这一切爆发的主力,在目前人工智能的发展中有着非常重要的地位。【问题 查看详情

深度学习100例|第27天-卷积神经网络(cnn):艺术作品识别(代码片段)

我的知乎我的微信公众号我的CSDN下载本文源码+数据需要帮助Ctrl+D:收藏本页面大家好,我是K同学啊!今天的案例是世界名画的分类识别🚀我的环境:语言环境:Python3.6.5编译器:jupyternotebook深... 查看详情