老师,关于激活函数relu

来源:2-5 数据处理与模型图构建(1)

慕仙5376180

2019-09-20

图片描述
老师,这段是Python3的代码,和视频上讲的Python2的代码有些不同,我想问一下为什么在这段代码中使用的是relu激活函数而不是sigmoid激活函数呢?而且关于这段代码hidden1,2,3的定义不是很懂,希望老师能讲解一下,谢谢老师!

老师这几天没看问答嘛~还是没搞懂,希望老师能讲解一下,十分感谢!

写回答

1回答

正十七

2019-10-01

sigmoid和relu都是激活函数,现在在图像领域普遍使用relu,因为它训练速度快,收敛效果好。当然,你也可以用sigmoid。

hidden1就是第一个全连接层的输出,同时它也是第二个全连接层的输入。hidden2,hidden3同理。有了这三个变量,就把这几个层次跟堆起来了。

0
2
慕仙5376180
懂了老师,看了后面的课就懂了,之前看第二章的时候不太懂,谢谢老师!
2019-10-01
共2条回复

深度学习之神经网络(CNN/RNN/GAN)算法原理+实战

深度学习算法工程师必学,深入理解深度学习核心算法CNN RNN GAN

2617 学习 · 935 问题

查看课程