在理解這個(gè)問(wèn)題之前我先提出幾個(gè)問(wèn)題:
- 什么是回歸?
- 一般是如何實(shí)現(xiàn)回歸?
- 神經(jīng)網(wǎng)絡(luò)又是如何實(shí)現(xiàn)回歸的措近?
回歸用于對(duì)連續(xù)值進(jìn)行預(yù)測(cè)。
回歸分析是一種統(tǒng)計(jì)學(xué)上分析數(shù)據(jù)的方法,目的在于了解兩個(gè)或多個(gè)變量之間是否相關(guān)础锐、相關(guān)方向和強(qiáng)度,并簡(jiǎn)歷數(shù)學(xué)模型以便觀察特定變量來(lái)預(yù)測(cè)研究者感興趣的變量荧缘。
回歸模型一般可定義為如下:
其中X為自變量皆警,Y為因變量,β為未知參數(shù)胜宇。
最簡(jiǎn)單的回歸模型就是單元線性回歸:
此外耀怜,還有多元線性回歸、對(duì)數(shù)線性回歸桐愉。在非線性回歸中有邏輯回歸财破、偏最小二乘回歸、自回歸等等从诲。Btw:邏輯回歸一般用于二分類左痢,本來(lái)輸出的是個(gè)連續(xù)變量,只是設(shè)了一個(gè)閾值0.5就可以將其分為0,1兩類了系洛。
神經(jīng)網(wǎng)絡(luò)就是一種非線性模型
神經(jīng)網(wǎng)絡(luò)的初衷是用于分類(或者說(shuō)現(xiàn)在大多神經(jīng)網(wǎng)絡(luò)都用于分類)俊性,如果用神經(jīng)網(wǎng)絡(luò)來(lái)做回歸預(yù)測(cè),一般是把神經(jīng)網(wǎng)絡(luò)當(dāng)作特征提取器描扯,得到特征向量后再訓(xùn)練線性回歸模型定页。而最簡(jiǎn)單的做法就是最后一層不激活,直接輸出(也可以換成其他線性分類器)绽诚,然后損失函數(shù)改為均方誤差函數(shù)就可以了典徊。
比較典型的回歸例子可以參考Bounding box回歸和關(guān)鍵點(diǎn)回歸(Deeppose)