只是一個(gè)相當(dāng)簡(jiǎn)化的計(jì)算過(guò)程,為了體現(xiàn)真實(shí)的梯度下降是如何計(jì)算的君纫。
這里遇到一個(gè)有趣的現(xiàn)象:損失函數(shù)對(duì)權(quán)重w和偏置b各自的偏導(dǎo)數(shù)奸鬓,在帶入同一個(gè)訓(xùn)練數(shù)據(jù)時(shí),計(jì)算的結(jié)果總是相同的谱仪,很神奇玻熙,后面有時(shí)間再詳細(xì)思考一下原因。
只是一個(gè)相當(dāng)簡(jiǎn)化的計(jì)算過(guò)程,為了體現(xiàn)真實(shí)的梯度下降是如何計(jì)算的君纫。
這里遇到一個(gè)有趣的現(xiàn)象:損失函數(shù)對(duì)權(quán)重w和偏置b各自的偏導(dǎo)數(shù)奸鬓,在帶入同一個(gè)訓(xùn)練數(shù)據(jù)時(shí),計(jì)算的結(jié)果總是相同的谱仪,很神奇玻熙,后面有時(shí)間再詳細(xì)思考一下原因。