如果用帶正則化的邏輯斯蒂回歸來(lái)做特征選擇,就必須對(duì)數(shù)據(jù)做標(biāo)準(zhǔn)化操作绩聘,否則選擇出來(lái)的變量會(huì)受到量綱的影響姥芥。通常會(huì)用邏輯回歸所得到的系數(shù)來(lái)衡量特征對(duì)目標(biāo)變量的影響据悔,系數(shù)的絕對(duì)值越大幼驶,說(shuō)明影響越大艾杏,這個(gè)特征也就越重要,但是不同的特征維度往往具有不同的量綱盅藻。假設(shè)我們有一個(gè)機(jī)器學(xué)習(xí)任務(wù)要根據(jù)一個(gè)人的的身高體重來(lái)預(yù)測(cè)他的性別购桑,模型根據(jù)訓(xùn)練數(shù)據(jù)擬合出了2個(gè)參數(shù)w1和w2,身高這個(gè)數(shù)據(jù)可以用CM或者M(jìn)來(lái)度量,當(dāng)用CM來(lái)度量的時(shí)候氏淑,只需要將系數(shù)乘以10就可以得到用M來(lái)度量的時(shí)候的結(jié)果勃蜘,這時(shí)候最終的損失并沒(méi)有改變,但是如果用系數(shù)來(lái)衡量特征的大小假残,用CM的時(shí)候缭贡,身高所對(duì)應(yīng)的權(quán)重更大,這將會(huì)對(duì)最終的特征排名產(chǎn)生影響辉懒。
量綱對(duì)正則化的影響
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
- 文/潘曉璐 我一進(jìn)店門(mén)荒勇,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人闻坚,你說(shuō)我怎么就攤上這事沽翔。” “怎么了窿凤?”我有些...
- 文/不壞的土叔 我叫張陵仅偎,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我雳殊,道長(zhǎng)橘沥,這世上最難降的妖魔是什么? 我笑而不...
- 正文 為了忘掉前任夯秃,我火速辦了婚禮座咆,結(jié)果婚禮上痢艺,老公的妹妹穿的比我還像新娘。我一直安慰自己介陶,他們只是感情好堤舒,可當(dāng)我...
- 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著哺呜,像睡著了一般舌缤。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上某残,一...
- 那天国撵,我揣著相機(jī)與錄音,去河邊找鬼玻墅。 笑死介牙,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的椭豫。 我是一名探鬼主播,決...
- 文/蒼蘭香墨 我猛地睜開(kāi)眼旨指,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼赏酥!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起谆构,我...
- 序言:老撾萬(wàn)榮一對(duì)情侶失蹤裸扶,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后搬素,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體呵晨,經(jīng)...
- 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
- 正文 我和宋清朗相戀三年熬尺,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了摸屠。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
- 正文 年R本政府宣布,位于F島的核電站绊含,受9級(jí)特大地震影響桑嘶,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜躬充,卻給世界環(huán)境...
- 文/蒙蒙 一逃顶、第九天 我趴在偏房一處隱蔽的房頂上張望讨便。 院中可真熱鬧,春花似錦口蝠、人聲如沸器钟。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)傲霸。三九已至,卻和暖如春眉反,著一層夾襖步出監(jiān)牢的瞬間昙啄,已是汗流浹背。 一陣腳步聲響...
- 正文 我出身青樓梳杏,卻偏偏與公主長(zhǎng)得像韧拒,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子十性,可洞房花燭夜當(dāng)晚...
推薦閱讀更多精彩內(nèi)容
- //我所經(jīng)歷的大數(shù)據(jù)平臺(tái)發(fā)展史(三):互聯(lián)網(wǎng)時(shí)代 ? 上篇http://www.infoq.com/cn/arti...
- 特征選擇 特征選擇(排序)對(duì)于數(shù)據(jù)科學(xué)家叛溢、機(jī)器學(xué)習(xí)從業(yè)者來(lái)說(shuō)非常重要。好的特征選擇能夠提升模型的性能劲适,更能幫助我們...
- 結(jié)合Scikit-learn介紹幾種常用的特征選擇方法 作者:Edwin Jarvis 特征選擇(排序)對(duì)于數(shù)據(jù)科...
- 0 關(guān)于本文 ? 主要內(nèi)容和結(jié)構(gòu)框架由@jasonfreak--使用sklearn做單機(jī)特征工程提供楷掉,其中夾雜...
- 在研究三國(guó)歷史的討論中烹植,子午谷奇謀是其中較為引人注目的。有關(guān)于魏延的計(jì)策是否可行愕贡,以及諸葛亮是否短于奇謀的種...