第一章 緒論1

1.1 這是一本什么書

1.2 強(qiáng)化學(xué)習(xí)可以解決什么問題

一?強(qiáng)化學(xué)習(xí)所能解決的問題

強(qiáng)化學(xué)習(xí)所能解決的問題:智能決策問題強(qiáng)化

更準(zhǔn)確的說是:序貫決策問題

何為序貫決策問題:需要連續(xù)不斷做出決策巡验,才能實現(xiàn)最終?標(biāo)的問題

1.3 強(qiáng)化學(xué)習(xí)如何解決問題

一? 如何解決序貫決策問題

1.監(jiān)督學(xué)習(xí)

解決的問題:智能感知的問題。

例?:數(shù)字?寫體識別

首先冲簿,監(jiān)督學(xué)習(xí)要先感知輸入的模樣(特征);然后,智能體對其進(jìn)行分類(標(biāo)簽)。

因此,智能感知的前提:需要 海量迂烁、有差異的輸入 + 輸入相關(guān)的標(biāo)簽。

小結(jié):監(jiān)督學(xué)習(xí)解決問題的方法:輸入大量有標(biāo)簽的數(shù)據(jù)递鹉,讓智能體從中習(xí)得輸入的特征并可對其分類盟步。


數(shù)字?寫體識別? ??????

2.強(qiáng)化學(xué)習(xí)

不同與監(jiān)督學(xué)習(xí)

強(qiáng)化學(xué)習(xí)不關(guān)心輸入的模樣,只關(guān)心在當(dāng)前輸入的情況下要采取什么動作來實現(xiàn)最終目的梳虽。

采取何種動作的出發(fā)點:使整個任務(wù)序列達(dá)到最優(yōu)(這就需要智能體不斷地與環(huán)境交互址芯,不斷嘗試。因為此時智能體也沒有上帝視角窜觉,完全不知哪個動作最有利于實現(xiàn)目標(biāo))

2.1 強(qiáng)化學(xué)習(xí)解決問題的框架


強(qiáng)化學(xué)習(xí)基本框架

智能體通過動作與環(huán)境進(jìn)?交互時,環(huán)境會返給智能體?個當(dāng)前的回報北专,智能體則根據(jù)當(dāng)前的回報評估所采取的動作:有利于實現(xiàn)?標(biāo)的動作被保留禀挫,不利于實現(xiàn)?標(biāo)的動作被衰減。


強(qiáng)化學(xué)習(xí)與監(jiān)督學(xué)習(xí)的共同點:二者都需要大量的數(shù)據(jù)進(jìn)行訓(xùn)練

強(qiáng)化學(xué)習(xí)與監(jiān)督學(xué)習(xí)的不同點:監(jiān)督學(xué)習(xí)需要的是多樣化的標(biāo)簽數(shù)據(jù)拓颓,強(qiáng)化學(xué)習(xí)需要的是帶有回報的交互數(shù)據(jù)语婴。即數(shù)據(jù)類型不同。

3.強(qiáng)化學(xué)習(xí)發(fā)展史

1998,Richard S.Sutton《強(qiáng)化學(xué)習(xí)導(dǎo)論第?版》砰左,即Reinforcement Learning:An Introduction

2013匿醒,DeepMind提出DQN(Deep Q Network),將深度?絡(luò)與強(qiáng)化學(xué)習(xí)算法結(jié)合形成深度強(qiáng)化學(xué)習(xí)

2016年和2017年缠导,?歌的AlphaGo連續(xù)兩年擊敗世界圍棋冠軍

現(xiàn)今

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末廉羔,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子僻造,更是在濱河造成了極大的恐慌憋他,老刑警劉巖,帶你破解...
    沈念sama閱讀 216,372評論 6 498
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件髓削,死亡現(xiàn)場離奇詭異竹挡,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)立膛,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,368評論 3 392
  • 文/潘曉璐 我一進(jìn)店門揪罕,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人宝泵,你說我怎么就攤上這事耸序。” “怎么了鲁猩?”我有些...
    開封第一講書人閱讀 162,415評論 0 353
  • 文/不壞的土叔 我叫張陵坎怪,是天一觀的道長。 經(jīng)常有香客問我廓握,道長搅窿,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,157評論 1 292
  • 正文 為了忘掉前任隙券,我火速辦了婚禮男应,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘娱仔。我一直安慰自己沐飘,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 67,171評論 6 388
  • 文/花漫 我一把揭開白布牲迫。 她就那樣靜靜地躺著耐朴,像睡著了一般。 火紅的嫁衣襯著肌膚如雪盹憎。 梳的紋絲不亂的頭發(fā)上筛峭,一...
    開封第一講書人閱讀 51,125評論 1 297
  • 那天,我揣著相機(jī)與錄音陪每,去河邊找鬼影晓。 笑死镰吵,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的挂签。 我是一名探鬼主播疤祭,決...
    沈念sama閱讀 40,028評論 3 417
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼饵婆!你這毒婦竟也來了勺馆?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 38,887評論 0 274
  • 序言:老撾萬榮一對情侶失蹤啦辐,失蹤者是張志新(化名)和其女友劉穎谓传,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體芹关,經(jīng)...
    沈念sama閱讀 45,310評論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡续挟,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,533評論 2 332
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了侥衬。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片诗祸。...
    茶點故事閱讀 39,690評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖轴总,靈堂內(nèi)的尸體忽然破棺而出直颅,到底是詐尸還是另有隱情,我是刑警寧澤怀樟,帶...
    沈念sama閱讀 35,411評論 5 343
  • 正文 年R本政府宣布功偿,位于F島的核電站,受9級特大地震影響往堡,放射性物質(zhì)發(fā)生泄漏械荷。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,004評論 3 325
  • 文/蒙蒙 一虑灰、第九天 我趴在偏房一處隱蔽的房頂上張望吨瞎。 院中可真熱鬧,春花似錦穆咐、人聲如沸颤诀。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,659評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽崖叫。三九已至,卻和暖如春熟尉,著一層夾襖步出監(jiān)牢的瞬間归露,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,812評論 1 268
  • 我被黑心中介騙來泰國打工斤儿, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留剧包,地道東北人。 一個月前我還...
    沈念sama閱讀 47,693評論 2 368
  • 正文 我出身青樓往果,卻偏偏與公主長得像疆液,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子陕贮,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,577評論 2 353

推薦閱讀更多精彩內(nèi)容