《AI數(shù)學(xué)基礎(chǔ)4-Sigmoid函數(shù)》
先看看生物學(xué)神經(jīng)網(wǎng)絡(luò):
再看看人工神經(jīng)網(wǎng)絡(luò):
再比較一下Andrew Ng講的邏輯回歸求導(dǎo):
x1徙歼,x2 是輸入的特征值犁河;w1,w2是特征值權(quán)重; b是偏置(bias),Z是神經(jīng)元(Cell Body)里面的求和函數(shù)魄梯,a是激活函數(shù)(activation function)桨螺,輸出預(yù)測值;
L是損失函數(shù)(Loss Function),反向計(jì)算下一個(gè)更新的參數(shù):w1,w2和b
這樣一比較,是不是非常形象和生動(dòng)酿秸?