機(jī)器學(xué)習(xí)算法實現(xiàn)(三):SVM

SVM算法的R語言實踐

數(shù)據(jù)集恨憎,采用R語言內(nèi)置的iris數(shù)據(jù)集郊楣。

查看數(shù)據(jù)集前六個觀測

head(iris)

第一步:加載SVM算法的R包e1071

library(e1071)

## Warning: package 'e1071'

was built under R version 3.1.3

library(printr)

第二步:把iris按著2:1的比例分為訓(xùn)練集和測試集

index <-sample(1:nrow(iris), 100)

iris.train <- iris[index, ]

iris.test <- iris[-index, ]

第三步:在訓(xùn)練集上用SVM構(gòu)建模型

model.SVM <- svm(Species ~., data=iris.train)

第四步:在測試集上對模型做測試

results.SVM <-predict(object=model.SVM, newdata=iris.test, type='class')

第五步:生成混淆矩陣,理解測試結(jié)果

table(results.SVM,iris.test$Species)


SVM原理

支持向量機(jī)净蚤,英文為Support?Vector Machine簡稱SV機(jī)(論文中一般簡稱SVM)今瀑。它是一種監(jiān)督式學(xué)習(xí)的方法点把,它廣泛的應(yīng)用于統(tǒng)計分類以及回歸分析中。

SVM的主要思想可以概括為兩點:

(1)它是針對線性可分情況進(jìn)行分析郎逃,對于線性不可分的情況,通過使用非線性映射算法將低維輸入空間線性不可分的樣本轉(zhuǎn)化為高維特征空間使其線性可分拿撩,從而使得高維特征空間采用線性算法對樣本的非線性特征進(jìn)行線性分析成為可能;

(2)它基于結(jié)構(gòu)風(fēng)險最小化理論之上在特征空間中建構(gòu)最優(yōu)分割超平面,使得學(xué)習(xí)器得到全局最優(yōu)化,并且在整個樣本空間的期望風(fēng)險以某個概率滿足一定上界襟己。在學(xué)習(xí)這種方法時,首先要弄清楚這種方法考慮問題的特點撬呢,這就要從線性可分的最簡單情況討論起,在沒有弄懂其原理之前魂拦,不要急于學(xué)習(xí)線性不可分等較復(fù)雜的情況,支持向量機(jī)芯勘。在設(shè)計時箱靴,需要用到條件極值問題的求解衡怀,因此需用拉格朗日乘子理論,但對多數(shù)人來說安疗,以前學(xué)到的或常用的是約束條件為等式表示的方式,但在此要用到以不等式作為必須滿足的條件荐类,此時只要了解拉格朗日理論的有關(guān)結(jié)論就行。

參考文獻(xiàn):

本文轉(zhuǎn)載自 ??http://www.360doc.com/userhome.aspx?userid=26290960&cid=10

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末玉罐,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子厌小,更是在濱河造成了極大的恐慌,老刑警劉巖璧亚,帶你破解...
    沈念sama閱讀 207,113評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件脂信,死亡現(xiàn)場離奇詭異,居然都是意外死亡狰闪,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,644評論 2 381
  • 文/潘曉璐 我一進(jìn)店門埋泵,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人丽声,你說我怎么就攤上這事【跻澹” “怎么了?”我有些...
    開封第一講書人閱讀 153,340評論 0 344
  • 文/不壞的土叔 我叫張陵霉撵,是天一觀的道長。 經(jīng)常有香客問我洪囤,道長,這世上最難降的妖魔是什么瘤缩? 我笑而不...
    開封第一講書人閱讀 55,449評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮款咖,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘铐殃。我一直安慰自己,他們只是感情好富腊,可當(dāng)我...
    茶點故事閱讀 64,445評論 5 374
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著赘被,像睡著了一般是整。 火紅的嫁衣襯著肌膚如雪浮入。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,166評論 1 284
  • 那天事秀,我揣著相機(jī)與錄音,去河邊找鬼易迹。 笑死,一個胖子當(dāng)著我的面吹牛睹欲,可吹牛的內(nèi)容都是我干的供炼。 我是一名探鬼主播窘疮,決...
    沈念sama閱讀 38,442評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼考余!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起楚堤,我...
    開封第一講書人閱讀 37,105評論 0 261
  • 序言:老撾萬榮一對情侶失蹤含懊,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后岔乔,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,601評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡雏门,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,066評論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了茁影。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,161評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡募闲,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出浩螺,到底是詐尸還是另有隱情靴患,我是刑警寧澤要出,帶...
    沈念sama閱讀 33,792評論 4 323
  • 正文 年R本政府宣布,位于F島的核電站患蹂,受9級特大地震影響砸紊,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜批糟,卻給世界環(huán)境...
    茶點故事閱讀 39,351評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望徽鼎。 院中可真熱鬧,春花似錦弹惦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,352評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽助泽。三九已至啰扛,卻和暖如春嗡贺,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背诫睬。 一陣腳步聲響...
    開封第一講書人閱讀 31,584評論 1 261
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留摄凡,地道東北人续徽。 一個月前我還...
    沈念sama閱讀 45,618評論 2 355
  • 正文 我出身青樓钦扭,卻偏偏與公主長得像,于是被迫代替她去往敵國和親谷扣。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,916評論 2 344

推薦閱讀更多精彩內(nèi)容