最近1個(gè)月送悔，閱讀機(jī)器學(xué)習(xí)相關(guān)書籍的過程中玉转，陸陸續(xù)續(xù)看到太多的算法。如何把這些算法或是模型上架（歸類）到腦子中沃琅，是個(gè)小難題哗咆。網(wǎng)上到是有大家頂貼比較多的歸類方式，如“人工智能之機(jī)器學(xué)習(xí)算法體系匯總”? http://blog.csdn.net/dream_an/article/details/76358374 益眉。 文章中的思維導(dǎo)圖的劃分方式與《圖解機(jī)器學(xué)習(xí)》這本書的里劃分類似岳枷。 也是當(dāng)前的主流劃分方式。 監(jiān)督學(xué)習(xí)呜叫，無監(jiān)督學(xué)習(xí)，半監(jiān)督學(xué)習(xí)殿衰，深度學(xué)習(xí)朱庆，強(qiáng)化學(xué)習(xí)，遷移學(xué)習(xí)闷祥，及其它（集成學(xué)習(xí)等）娱颊。 與此對(duì)比的李航老師寫的《統(tǒng)計(jì)學(xué)習(xí)方式》里到是直接把各模型算法給平鋪出來。從第二章開始凯砍，每一章講一種方法箱硕。 分別講了感知機(jī)，k近鄰法悟衩，樸素貝頁斯剧罩，決策樹，LR與最大熵模型座泳，SVM惠昔，提升方法，EM算法（此方法不具有具體模型）隱馬爾可夫模型挑势，條件隨機(jī)場(chǎng)镇防。?
初步看了，統(tǒng)計(jì)學(xué)習(xí)方法這本書里只是各種方法的羅列潮饱。 在翻看了該書的第一章節(jié)后發(fā)現(xiàn)来氧，原來這一章節(jié)就是幫讀者搭建框架的。 而恰恰就講到了何為監(jiān)督學(xué)習(xí)，以及把監(jiān)督下面分成了“分類”啦扬，“標(biāo)注”與“回歸” 中狂。 這與《圖解機(jī)器學(xué)習(xí)》一書里的劃分就一致了，“圖解機(jī)器學(xué)習(xí)” 將方法分成了幾大部分“有監(jiān)督回歸” “有監(jiān)督分類” “無監(jiān)督學(xué)習(xí)” “新興機(jī)器學(xué)習(xí)算法”? 考传。?
《統(tǒng)計(jì)學(xué)習(xí)方法》一書中吃型，把方法 = 模型 + 策略 + 算法?
模型 ： 在監(jiān)督學(xué)習(xí)過程中，模型就是所要學(xué)習(xí)的條件概率分布或決策函數(shù)
策略： 從假設(shè)空間中選取最優(yōu)模型僚楞，這就引入了損失函數(shù)與風(fēng)險(xiǎn)函數(shù)的概念
算法： 學(xué)習(xí)模型的具體計(jì)算方法
