【笔记】为什么不干脆直接用dJ_debug作为梯度函数?
来源:6-8 如何确定梯度计算的准确性?调试梯度下降法
神经旷野舞者
2018-02-14
老师为什么不干脆直接用dJ_debug作为梯度函数?
补充:
又看了一遍,第一遍忽略了很多东西,知道了,因为要计算两次J,如果J的复杂度很高,就很耗时了,所以作为调试手段计算小数据量。
写回答
1回答
-
对,dJ_debug的计算复杂度太高。可以在数据量比较大的时候,使用dJ_debug和dJ计时比较一下二者的运算效率:)
012018-02-14
相似问题
封装dJ_debug
回答 1
两种梯度下降法的速度比较
回答 1
该怎么理解随机梯度必然会下降这个操作?
回答 1
关于LASSO中不可导函数的梯度
回答 2
梯度下降法和梯度上升法的收敛情况
回答 1