老师，网络正态分布初始化，是指全连接层的w和b都服从正态分布初始化吗

首页课程实战体系课手记专栏慕课教程

老师，网络正态分布初始化，是指全连接层的w和b都服从正态分布初始化吗

来源：5-2 激活函数到调参技巧（1）

会飞的光影

2020-08-07

写回答

1回答

正十七

正十七

2020-08-15

全连接层的w一般按照正态分布或者其他分布去初始化。b一般是用0初始化就可以。

卷积层的初始化也需要遵循一个分布的。它和全连接层一样可以遵循正态分布，也可以是其他的。每一层都可以自定义初始化方式。

0

0

深度学习之神经网络(CNN/RNN/GAN)算法原理+实战

深度学习算法工程师必学，深入理解深度学习核心算法CNN RNN GAN

2617 学习 · 935 问题

相似问题

xavier初始化方法为什么有效

回答 1

老师，在5-2调参技巧讲网络初始化的时候。参数是指每个卷积核的参数，还是说模型训练最终的参数。还是第一层的参数，这里没讲清楚。

回答 1

AlexNet最后是连了两个全连接层么？

回答 1

state初始化问题

回答 1

老师您好，请问多层神经网络的课程视频在哪里呢？

回答 1

打开慕课网App查看更多内容