機(jī)器學(xué)習(xí)(統(tǒng)計(jì)學(xué)習(xí))崎淳,由多個(gè)要素組成,即模型愕把、策略拣凹、算法,大部分機(jī)器學(xué)習(xí)都包含這三個(gè)維度恨豁,樹模型沒有算法維度嚣镜。
模型:即現(xiàn)實(shí)問(wèn)題的假設(shè)空間,問(wèn)題滿足線性空間還是非線性空間圣絮;采用神經(jīng)網(wǎng)絡(luò)還是非神經(jīng)網(wǎng)絡(luò)祈惶。即通常所說(shuō)的數(shù)學(xué)模型,形式可能很簡(jiǎn)單,也可能非常復(fù)雜扮匠。模型確定了優(yōu)化問(wèn)題的空間捧请。
策略:策略指的是以什么樣的標(biāo)準(zhǔn)選擇模型,和模型評(píng)估是兩個(gè)不同的概念棒搜,兩者一般屬于正相關(guān)疹蛉。策略即通常所說(shuō)的損失函數(shù),不同的業(yè)務(wù)問(wèn)題需要采用不同的策略力麸。策略指導(dǎo)優(yōu)化的方向可款。
算法:算法指具體的優(yōu)化手段育韩,即通過(guò)什么方式求解。常見的有解析解闺鲸、梯度下降類筋讨。
機(jī)器學(xué)習(xí)的不同,主要是上述三要素間的不同摸恍,不同維度間的任意組合悉罕,可以得到非常多的機(jī)器學(xué)習(xí)方法。