博舍

【人工智能】— 深度神经网络、卷积神经网络(CNN)、多卷积核、全连接、池化 人工智能实验bp神经网络是什么

【人工智能】— 深度神经网络、卷积神经网络(CNN)、多卷积核、全连接、池化

【人工智能】—深度神经网络、卷积神经网络(CNN)、多卷积核、全连接、池化深度神经网络训练训练深度神经网络参数共享卷积神经网络(CNN)卷积多卷积核卷积全连接最大池化卷积+池化拉平向量激活函数优化小结深度神经网络训练

Pre-training+Fine-tuning

Pre-training(预训练):监督逐层训练是多隐层网络训练的有效手段,每次训练一层隐层结点,训练时将上一层隐层结点的输出作为输入,而本层隐结点的输出作为下一层隐结点的输入,这称为”预训练”.Fine-tuning(微调):在预训练全部完成后,再对整个网络进行微调训练.微调一般使用BP算法.Comments:预训练+微调的做法可以视为将大量参数分组,对每组先找到局部看起来比较好的设置,然后再基于这些局部较优的结果联合起来进行全局寻优.训练深度神经网络参数共享

参数共享是深度神经网络中的一种技术,它使多个神经元在网络中使用相同的参数集。这种技术有助于减少训练网络所需的参数数量,从而提高其计算效率。

卷积神经网络(CNN)

CNN是一种层次特征提取器,用于提取越来越高层次的特征。由于特征的感受域越来越大,特征从局部变为全局。

卷积

卷积是指对两个函数进行加权求和的操作。在卷积神经网络中,卷积操作是指将输入数据与一个卷积核(也称为滤波器或权重)进行卷积计算,得到一个特征映射的过程。

具体来说,卷积操作包括以下三个要素:

输入数据:需要进行卷积计算的数据。卷积核:用于对输入数据进行卷积的权重参数。特征映射:经过卷积操作得到的输出结果。

多卷积核

在卷积神经网络中,通常会在每一层使用多个卷积核(也称为过滤器或滤波器)来提取不同的特征。这是因为只使用一个卷积核无法充分提取输入数据的全部信息,而使用多个卷积核可以提取更多的特征信息。

如果只使用一个卷积核来提取特征,则可能会忽略输入数据中的其他特征信息,从而导致信息丢失。而使用多个卷积核可以提取更多的特征信息,并且可以通过堆叠这些特征来形成更高级别的特征表示。高级别的特征通常是由低级别的特征组合而成的,这也是为什么需要使用多个卷积核的原因。

卷积

全连接

最大池化

卷积+池化

拉平向量

激活函数

优化当计算从输出到输入的参数梯度时,这就是为什么它被称为反向传播。由于卷积本质上是加权和,CNN的BP类似于全连接网络的BP。小结CNN是分层特征提取器,高层特征是下层特征的组合。卷积是所有输入通道的加权和CNN最常用的激活是ReLUCNN最常用的池化策略是最大池化训练策略是BP在验证集中找到导致最大响应的补丁是可视化特征的一种非常简单的方法。LeNet-5、AlexNet、GoogleNet、VGG-Net、ResNet、BN

BP神经网络参数总结

心音信号特征提取Matlab系统

CSDN-Ada助手:一定要坚持创作更多高质量博客哦,小小红包,以资鼓励,更多创作活动请看:新星计划2023:https://marketing.csdn.net/p/1738cda78d47b2ebb920916aab7c3584?utm_source=csdn_ai_ada_redpacket新星计划2023:https://marketing.csdn.net/p/1738cda78d47b2ebb920916aab7c3584?utm_source=csdn_ai_ada_redpacket上传ChatGPT/计算机论文等资源,瓜分¥5000元现金:https://blog.csdn.net/VIP_Assistant/article/details/130196121?utm_source=csdn_ai_ada_redpacket新人首创任务挑战赛:https://marketing.csdn.net/p/90a06697f3eae83aabea1e150f5be8a5?utm_source=csdn_ai_ada_redpacketMicrosoftEdge功能测评!:https://activity.csdn.net/creatActivity?id=10403?utm_source=csdn_ai_ada_redpacket职场解惑讨论会:https://activity.csdn.net/creatActivity?id=10427?utm_source=csdn_ai_ada_redpacket可持续能源技术真的能改变世界吗?:https://activity.csdn.net/creatActivity?id=10425?utm_source=csdn_ai_ada_redpacket无效数据,你会怎么处理?:https://activity.csdn.net/creatActivity?id=10423?utm_source=csdn_ai_ada_redpacket物联网技术正在如何影响我们的生活:https://activity.csdn.net/creatActivity?id=10421?utm_source=csdn_ai_ada_redpacket生物识别技术能否成为应对安全挑战的绝佳选择?:https://activity.csdn.net/creatActivity?id=10411?utm_source=csdn_ai_ada_redpacket应届生如何提高职场竞争力:https://activity.csdn.net/creatActivity?id=10409?utm_source=csdn_ai_ada_redpacket讯飞星火大模型将超越chatgpt?:https://activity.csdn.net/creatActivity?id=10407?utm_source=csdn_ai_ada_redpacket职场新人备忘录:https://activity.csdn.net/creatActivity?id=10405?utm_source=csdn_ai_ada_redpacket“裸奔”时代下该如何保护网络隐私:https://activity.csdn.net/creatActivity?id=10401?utm_source=csdn_ai_ada_redpacketVRvsAR:哪种技术更有潜力改变未来?:https://activity.csdn.net/creatActivity?id=10399?utm_source=csdn_ai_ada_redpacket蓝桥杯备赛指南分享:https://activity.csdn.net/creatActivity?id=10317?utm_source=csdn_ai_ada_redpacket

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容,一经查实,本站将立刻删除。

上一篇

下一篇