初-機(jī)器學(xué)習(xí)最核心的基礎(chǔ)概念名詞-必記!

兩大機(jī)器學(xué)習(xí)模式:有監(jiān)督學(xué)習(xí)和無監(jiān)督學(xué)習(xí)

? 有監(jiān)督學(xué)習(xí) :通過現(xiàn)有的數(shù)據(jù)(訓(xùn)練數(shù)據(jù)集)進(jìn)行建模洁段,再使用訓(xùn)練出來的模型對(duì)新的數(shù)據(jù)進(jìn)行分類或者回歸分析的學(xué)習(xí)方法刺下。? ?說人話:訓(xùn)練數(shù)據(jù)集一般包含樣本的特征變量?和?分類標(biāo)簽,在這個(gè)過程中使用不同的機(jī)器算法通過這些訓(xùn)練數(shù)據(jù)推斷出分類的方法并且運(yùn)用于新的樣本中郭脂,這就是整個(gè)監(jiān)督學(xué)習(xí)的過程年碘。

無監(jiān)督學(xué)習(xí):在沒有?訓(xùn)練數(shù)據(jù)集??的情況下,對(duì)沒有標(biāo)簽的數(shù)據(jù)進(jìn)行分析并建立合適的模型展鸡,從而給出問題解決方案的方法屿衅。?


無監(jiān)督學(xué)習(xí)中的常見基本概念:

?聚類和數(shù)據(jù)轉(zhuǎn)換

?在無監(jiān)督學(xué)習(xí)中,最常見的兩類任務(wù)類型是?數(shù)據(jù)轉(zhuǎn)換?和 聚類分析莹弊。

數(shù)據(jù)轉(zhuǎn)換:很多數(shù)據(jù)集原始的面目是十分復(fù)雜的(比如特征變量十分之多)涤久,若想從中提取有用的信息就需要先把這些復(fù)雜的數(shù)據(jù)通過無監(jiān)督學(xué)習(xí)的一些算法進(jìn)行轉(zhuǎn)換,使其變得容易理解箱硕。常見的數(shù)據(jù)轉(zhuǎn)換方法就是 數(shù)據(jù)降維拴竹,即通過對(duì)特征變量較多的數(shù)據(jù)集進(jìn)行分析,將無關(guān)緊要的特征變量進(jìn)行剔除剧罩,保留關(guān)鍵的特征變量∽荆【例如惠昔,將數(shù)據(jù)集的降至二維幕与,這樣就可以方便的進(jìn)行數(shù)據(jù)可視化處理≌蚍溃】

聚類:通過把樣本劃歸到不同的分組的算法啦鸣,每個(gè)分組中的元素都具有比較接近的特征。


有監(jiān)督學(xué)習(xí)中的常見基本概念:? ?

?回歸和分類?

“回歸和分類是有監(jiān)督學(xué)習(xí)中最常見的兩個(gè)方法来氧〗敫”?

分類:對(duì)于分類來講,機(jī)器學(xué)習(xí)的目標(biāo)是對(duì)樣本的標(biāo)簽進(jìn)行預(yù)測(cè)啦扬,判斷樣本屬于哪一個(gè)分類中狂,結(jié)果是離散的(離散:連續(xù)的反義詞就是離散 ,就是不連續(xù))扑毡。? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 舉個(gè)小例子:某食品公司研發(fā)出了一款新的餅干胃榕,如果用算法模型來預(yù)測(cè)大眾對(duì)這個(gè)未上市的新產(chǎn)品的接受度時(shí),可以將之前的餅干分為“大家喜歡“和”大家不喜歡”瞄摊,這是屬于“二元分類”勋又。如果將之前的餅干產(chǎn)品分為“大家很喜歡”、“大家比較喜歡”换帜、“大家有點(diǎn)不喜歡”楔壤、“大家很不喜歡”四種類型,就屬于多元分類惯驼,這個(gè)結(jié)果就是離散的特征蹲嚣,需要用分類的方法來處理。

回歸:對(duì)于回歸來講跳座,機(jī)器學(xué)習(xí)的目標(biāo)是要預(yù)測(cè)一個(gè)連續(xù)的數(shù)值或者是范圍端铛。? ? ? ? ? ? ? ? ? ? ? ? ? ? 再來一個(gè)例子:將上面的例子稍微改一下,不分類疲眷,換成打分禾蚕。通過調(diào)查搜集用戶對(duì)此食品公司之前餅干產(chǎn)品的打分?jǐn)?shù)據(jù),將此?打分?jǐn)?shù)據(jù) 結(jié)合 餅干的特征?作為訓(xùn)練數(shù)據(jù)集狂丝,通過回歸建模换淆,就可以預(yù)測(cè)消費(fèi)者對(duì)這款產(chǎn)品未來上市時(shí)的評(píng)價(jià)了。

模型的泛化几颜、過擬合倍试、欠擬合

? ? ? ? 在有監(jiān)督學(xué)習(xí)中,使用訓(xùn)練數(shù)據(jù)集創(chuàng)建一個(gè)模型蛋哭,之后把這個(gè)模型用于新的之前從未用過見過的數(shù)據(jù)中县习,這個(gè)過程就成為泛化直白點(diǎn)講,就是將訓(xùn)練出來的模型進(jìn)行實(shí)際應(yīng)用躁愿。

? ? ? “如何來評(píng)價(jià)一個(gè)模型的泛化準(zhǔn)確度叛本?”? ?---- 使用 試數(shù)據(jù)集 對(duì)模型的表現(xiàn)進(jìn)行評(píng)估。? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?如果在訓(xùn)練數(shù)據(jù)集上使用了一個(gè)非常復(fù)雜的模型彤钟,以至于這個(gè)模型在擬合數(shù)據(jù)的時(shí)候表現(xiàn)非常好来候,但是在測(cè)試數(shù)據(jù)集的表現(xiàn)非常差,就說明模型發(fā)生了過擬合【overfitting】的問題逸雹。? ? ? 反之举畸,如果模型非常簡(jiǎn)單篱蝇,連訓(xùn)練數(shù)據(jù)集的特點(diǎn)都不能完全考慮到的話法绵,那么這個(gè)模型在訓(xùn)練數(shù)據(jù)集和測(cè)試數(shù)據(jù)集的得分都會(huì)非常差佩抹,這就說模型出現(xiàn)了欠擬合【underfitting】問題。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末辫樱,一起剝皮案震驚了整個(gè)濱河市峭拘,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌狮暑,老刑警劉巖鸡挠,帶你破解...
    沈念sama閱讀 216,372評(píng)論 6 498
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異搬男,居然都是意外死亡拣展,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,368評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門缔逛,熙熙樓的掌柜王于貴愁眉苦臉地迎上來备埃,“玉大人,你說我怎么就攤上這事褐奴“唇牛” “怎么了?”我有些...
    開封第一講書人閱讀 162,415評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵敦冬,是天一觀的道長(zhǎng)辅搬。 經(jīng)常有香客問我,道長(zhǎng)脖旱,這世上最難降的妖魔是什么堪遂? 我笑而不...
    開封第一講書人閱讀 58,157評(píng)論 1 292
  • 正文 為了忘掉前任,我火速辦了婚禮萌庆,結(jié)果婚禮上溶褪,老公的妹妹穿的比我還像新娘。我一直安慰自己践险,他們只是感情好猿妈,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,171評(píng)論 6 388
  • 文/花漫 我一把揭開白布吹菱。 她就那樣靜靜地躺著,像睡著了一般于游。 火紅的嫁衣襯著肌膚如雪毁葱。 梳的紋絲不亂的頭發(fā)上垫言,一...
    開封第一講書人閱讀 51,125評(píng)論 1 297
  • 那天贰剥,我揣著相機(jī)與錄音,去河邊找鬼筷频。 笑死蚌成,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的凛捏。 我是一名探鬼主播担忧,決...
    沈念sama閱讀 40,028評(píng)論 3 417
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼坯癣!你這毒婦竟也來了瓶盛?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 38,887評(píng)論 0 274
  • 序言:老撾萬榮一對(duì)情侶失蹤示罗,失蹤者是張志新(化名)和其女友劉穎惩猫,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體蚜点,經(jīng)...
    沈念sama閱讀 45,310評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡轧房,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,533評(píng)論 2 332
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了绍绘。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片奶镶。...
    茶點(diǎn)故事閱讀 39,690評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖陪拘,靈堂內(nèi)的尸體忽然破棺而出厂镇,到底是詐尸還是另有隱情,我是刑警寧澤左刽,帶...
    沈念sama閱讀 35,411評(píng)論 5 343
  • 正文 年R本政府宣布捺信,位于F島的核電站,受9級(jí)特大地震影響悠反,放射性物質(zhì)發(fā)生泄漏残黑。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,004評(píng)論 3 325
  • 文/蒙蒙 一斋否、第九天 我趴在偏房一處隱蔽的房頂上張望梨水。 院中可真熱鬧,春花似錦茵臭、人聲如沸疫诽。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,659評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽奇徒。三九已至雏亚,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間摩钙,已是汗流浹背罢低。 一陣腳步聲響...
    開封第一講書人閱讀 32,812評(píng)論 1 268
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留胖笛,地道東北人网持。 一個(gè)月前我還...
    沈念sama閱讀 47,693評(píng)論 2 368
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像长踊,于是被迫代替她去往敵國(guó)和親功舀。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,577評(píng)論 2 353

推薦閱讀更多精彩內(nèi)容