week1_3作業(yè)筆記

吳恩達(dá)深度學(xué)習(xí)作業(yè)week1_3

構(gòu)建兩層神經(jīng)網(wǎng)絡(luò)

1.定義神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)
根據(jù)X,Y的維度定義(此時的X,Y包括所有數(shù)據(jù))輸入層/隱藏層/輸出層數(shù)量

2.初始化模型的參數(shù)
采用np.random.randn(a,b) * 0.01隨機(jī)初始化一個維度為(a,b)的矩陣
將偏向量初始化為0
np.zeros(a,b)

分別初始化個層的w b 即 w1,b1,w2, b2,并用assert語句確保各參數(shù)的維度
以字典形式輸出w,b

3.進(jìn)行前向傳播

  • 使用字典類型的參數(shù)w,b,檢索每個參數(shù)
  • 實(shí)現(xiàn)前向傳播块蚌,計算Z[1] A[1] Z[2] A[2]弃揽,訓(xùn)練集里面所有例子的預(yù)測向量受葛,并assert確保各值維度正確
  • 反向傳播所需的值存儲在“cache”中朱盐,cache將作為反向傳播函數(shù)的輸入(Z1 A1 Z2 A2 )

4.計算損失

  • 采用交叉熵 此處可能出現(xiàn)由于np.exp函數(shù)導(dǎo)致的Warnning 可百度忽略warning
  • 使用np.squeeze函數(shù)remove矩陣中維度為1的維

5.后向傳播

  • 按照后向傳播公式,一一計算似将,注意各矩陣維度梭伐,正確定義計算痹雅,并以字典形式輸出梯度值組成的舉證矩陣。

6.更新參數(shù)

  • 按照公式進(jìn)行更新

7.整合各個函數(shù)至模型中

8.預(yù)測函數(shù)

  • 直接使用訓(xùn)練出來的參數(shù)糊识,將測試集和參數(shù)一起作為前向傳播的變量绩社,得到預(yù)測結(jié)果后摔蓝,結(jié)合輸出層的激活函數(shù)進(jìn)行判定分類(此處是sigmoid函數(shù)的結(jié)果進(jìn)行四舍五入分類)
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市愉耙,隨后出現(xiàn)的幾起案子贮尉,更是在濱河造成了極大的恐慌,老刑警劉巖朴沿,帶你破解...
    沈念sama閱讀 217,907評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件猜谚,死亡現(xiàn)場離奇詭異,居然都是意外死亡赌渣,警方通過查閱死者的電腦和手機(jī)魏铅,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,987評論 3 395
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來坚芜,“玉大人览芳,你說我怎么就攤上這事『枋” “怎么了沧竟?”我有些...
    開封第一講書人閱讀 164,298評論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長缚忧。 經(jīng)常有香客問我屯仗,道長,這世上最難降的妖魔是什么搔谴? 我笑而不...
    開封第一講書人閱讀 58,586評論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮桩撮,結(jié)果婚禮上敦第,老公的妹妹穿的比我還像新娘。我一直安慰自己店量,他們只是感情好芜果,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,633評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著融师,像睡著了一般右钾。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上旱爆,一...
    開封第一講書人閱讀 51,488評論 1 302
  • 那天舀射,我揣著相機(jī)與錄音,去河邊找鬼怀伦。 笑死脆烟,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的房待。 我是一名探鬼主播邢羔,決...
    沈念sama閱讀 40,275評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼驼抹,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了拜鹤?” 一聲冷哼從身側(cè)響起框冀,我...
    開封第一講書人閱讀 39,176評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎敏簿,沒想到半個月后明也,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,619評論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡极谊,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,819評論 3 336
  • 正文 我和宋清朗相戀三年诡右,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片轻猖。...
    茶點(diǎn)故事閱讀 39,932評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡帆吻,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出咙边,到底是詐尸還是另有隱情猜煮,我是刑警寧澤,帶...
    沈念sama閱讀 35,655評論 5 346
  • 正文 年R本政府宣布败许,位于F島的核電站王带,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏市殷。R本人自食惡果不足惜愕撰,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,265評論 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望醋寝。 院中可真熱鬧搞挣,春花似錦、人聲如沸音羞。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,871評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽嗅绰。三九已至舍肠,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間窘面,已是汗流浹背翠语。 一陣腳步聲響...
    開封第一講書人閱讀 32,994評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留财边,地道東北人啡专。 一個月前我還...
    沈念sama閱讀 48,095評論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像制圈,于是被迫代替她去往敵國和親们童。 傳聞我的和親對象是個殘疾皇子畔况,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,884評論 2 354

推薦閱讀更多精彩內(nèi)容