馬爾科夫模型的幾個(gè)子模型

馬爾可夫鏈(MC):機(jī)器學(xué)習(xí)

隱馬爾可夫模型(HMM):機(jī)器學(xué)習(xí)

馬爾科夫決策過(guò)程(MDP):強(qiáng)化學(xué)習(xí)


MDP見:https://www.cnblogs.com/jinxulin/p/3517377.html和

https://blog.csdn.net/WangJiankun_ls/article/details/70885008

隱馬爾可夫鏈的具體講解可以看https://www.cnblogs.com/skyme/p/4651331.html陕赃,詳細(xì)的很

另外晦攒,任何一個(gè)隱馬爾可夫模型都可以用五元組來(lái)表示

:param obs:觀測(cè)序列

:param states:隱狀態(tài)

:param start_p:初始概率(隱狀態(tài))

:param trans_p:轉(zhuǎn)移概率(隱狀態(tài))

:param emit_p: 發(fā)射概率 (隱狀態(tài)表現(xiàn)為顯狀態(tài)的概率)


另外用HMM進(jìn)行map match的論文在https://www.cnblogs.com/mindpuzzle/p/3653043.html

其余的我會(huì)補(bǔ)充

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 212,718評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件嫂丙,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡规哲,警方通過(guò)查閱死者的電腦和手機(jī)跟啤,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,683評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)唉锌,“玉大人隅肥,你說(shuō)我怎么就攤上這事“兰颍” “怎么了腥放?”我有些...
    開封第一講書人閱讀 158,207評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)绿语。 經(jīng)常有香客問(wèn)我秃症,道長(zhǎng),這世上最難降的妖魔是什么吕粹? 我笑而不...
    開封第一講書人閱讀 56,755評(píng)論 1 284
  • 正文 為了忘掉前任种柑,我火速辦了婚禮,結(jié)果婚禮上匹耕,老公的妹妹穿的比我還像新娘聚请。我一直安慰自己,他們只是感情好稳其,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,862評(píng)論 6 386
  • 文/花漫 我一把揭開白布驶赏。 她就那樣靜靜地躺著,像睡著了一般既鞠。 火紅的嫁衣襯著肌膚如雪煤傍。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 50,050評(píng)論 1 291
  • 那天嘱蛋,我揣著相機(jī)與錄音患久,去河邊找鬼。 笑死浑槽,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的返帕。 我是一名探鬼主播桐玻,決...
    沈念sama閱讀 39,136評(píng)論 3 410
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼荆萤!你這毒婦竟也來(lái)了镊靴?” 一聲冷哼從身側(cè)響起铣卡,我...
    開封第一講書人閱讀 37,882評(píng)論 0 268
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎偏竟,沒(méi)想到半個(gè)月后煮落,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,330評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡踊谋,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,651評(píng)論 2 327
  • 正文 我和宋清朗相戀三年蝉仇,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片殖蚕。...
    茶點(diǎn)故事閱讀 38,789評(píng)論 1 341
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡轿衔,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出睦疫,到底是詐尸還是另有隱情害驹,我是刑警寧澤,帶...
    沈念sama閱讀 34,477評(píng)論 4 333
  • 正文 年R本政府宣布蛤育,位于F島的核電站宛官,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏瓦糕。R本人自食惡果不足惜底洗,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 40,135評(píng)論 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望刻坊。 院中可真熱鬧枷恕,春花似錦、人聲如沸谭胚。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,864評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)灾而。三九已至胡控,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間旁趟,已是汗流浹背昼激。 一陣腳步聲響...
    開封第一講書人閱讀 32,099評(píng)論 1 267
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留锡搜,地道東北人橙困。 一個(gè)月前我還...
    沈念sama閱讀 46,598評(píng)論 2 362
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像耕餐,于是被迫代替她去往敵國(guó)和親凡傅。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,697評(píng)論 2 351

推薦閱讀更多精彩內(nèi)容