2.1.1.2支持向量機(分類)

模型介紹:如圖所示的數(shù)據(jù)分類問題分歇,我們更有無數(shù)種線性分類邊界可供選擇透葛。
支持向量機分類器,便是根據(jù)訓(xùn)練樣本的分布卿樱,搜索所有的線性分類器中最佳的一個僚害。進一步仔細觀察圖中的紅線,我們會發(fā)現(xiàn)決定其直線位置的樣本并不是所有訓(xùn)練數(shù)據(jù)繁调,而是其中的兩個空間間隔最小的兩個不同類別的數(shù)據(jù)點萨蚕,而我們把這種可以用來真正幫助決策最優(yōu)線性分類模型的數(shù)據(jù)點叫做“支持向量”。
邏輯斯蒂回歸模型在訓(xùn)練過程中由于考慮了所有訓(xùn)練樣本對參數(shù)的影響蹄胰,因此不一定獲得最佳的分類器岳遥。

讀取代碼樣例
from sklearn.datasets import load_digits
#從通過數(shù)據(jù)加載器獲得手寫體數(shù)字的數(shù)碼圖像數(shù)據(jù)并儲存在digits變量中
digits=load_digits()
#檢視數(shù)據(jù)規(guī)模和特征維度
digits.data.shape

(1797, 64)
數(shù)據(jù)圖像數(shù)據(jù)共有1797條,并且每幅圖片是由8*8=64的像素矩陣表示裕寨。

分割代碼樣例
from sklearn.cross_validation import train_test_split
X_train,X_test,y_train,y_test=train_test_split(digits.data,digits.target,test_size=0.25,random_state=33)
#檢視訓(xùn)練數(shù)據(jù)規(guī)模
y_train.shape

(1347,)

#檢視測試數(shù)據(jù)規(guī)模
y_test.shape

(450,)
1797*0.25=450

使用支持向量機(分類)對手寫體數(shù)字圖像進行識別
from sklearn.preprocessing import StandardScaler
#從仍然需要訓(xùn)練和測試的特征數(shù)據(jù)進行標準化
ss=StandardScaler()
X_train=ss.fit_transform(X_train)
X_test=ss.transform(X_test)
from sklearn.svm import LinearSVC
#初始化線性假設(shè)的支持向量機分類器LinearSVC
lsvc=LinearSVC()
#進行模型訓(xùn)練
lsvc.fit(X_train,y_train)
#利用訓(xùn)練好的模型對測試樣本的數(shù)字類別進行預(yù)測浩蓉,預(yù)測結(jié)果儲存在變量y_predict中。
y_predict=lsvc.predict(X_test)
支持向量機(分類)對手寫體數(shù)字圖像進行識別能力的評估
#使用模型自帶的評估函數(shù)進行準確性測評
print('The Accuracy of LinearSVC is',lsvc.score(X_test,y_test))

The Accuracy of LinearSVC is 0.953333333333

#依然使用sklearn.metrics里面的classification_report模塊對預(yù)測結(jié)果做更加詳細的分析
from sklearn.metrics import classification_report
print(classification_report(y_test,y_predict,target_names=digits.target_names.astype(str)))

支持向量機(分類)模型的確能提供比較高的手寫體數(shù)字識別性能宾袜。平均而言捻艳,各項指標都在95%上下。
在這里需要進一步指出:召回率庆猫、準確率和F1指標最先適用于二分類任務(wù)认轨;但是在本示例中,我們的分類目標有10個類別月培,即0-9的10個數(shù)字嘁字。因此無法直接計算上述三個指標。通常的做法是杉畜,逐一評估某個類別的這三個性能指標纪蜒。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市此叠,隨后出現(xiàn)的幾起案子纯续,更是在濱河造成了極大的恐慌,老刑警劉巖拌蜘,帶你破解...
    沈念sama閱讀 218,941評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件杆烁,死亡現(xiàn)場離奇詭異,居然都是意外死亡简卧,警方通過查閱死者的電腦和手機兔魂,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,397評論 3 395
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來举娩,“玉大人析校,你說我怎么就攤上這事构罗。” “怎么了智玻?”我有些...
    開封第一講書人閱讀 165,345評論 0 356
  • 文/不壞的土叔 我叫張陵遂唧,是天一觀的道長。 經(jīng)常有香客問我吊奢,道長盖彭,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,851評論 1 295
  • 正文 為了忘掉前任页滚,我火速辦了婚禮召边,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘裹驰。我一直安慰自己隧熙,他們只是感情好,可當我...
    茶點故事閱讀 67,868評論 6 392
  • 文/花漫 我一把揭開白布幻林。 她就那樣靜靜地躺著贞盯,像睡著了一般。 火紅的嫁衣襯著肌膚如雪沪饺。 梳的紋絲不亂的頭發(fā)上躏敢,一...
    開封第一講書人閱讀 51,688評論 1 305
  • 那天,我揣著相機與錄音随闽,去河邊找鬼父丰。 笑死,一個胖子當著我的面吹牛掘宪,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播攘烛,決...
    沈念sama閱讀 40,414評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼魏滚,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了坟漱?” 一聲冷哼從身側(cè)響起鼠次,我...
    開封第一講書人閱讀 39,319評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎芋齿,沒想到半個月后腥寇,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,775評論 1 315
  • 正文 獨居荒郊野嶺守林人離奇死亡觅捆,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,945評論 3 336
  • 正文 我和宋清朗相戀三年赦役,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片栅炒。...
    茶點故事閱讀 40,096評論 1 350
  • 序言:一個原本活蹦亂跳的男人離奇死亡掂摔,死狀恐怖术羔,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情乙漓,我是刑警寧澤级历,帶...
    沈念sama閱讀 35,789評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站叭披,受9級特大地震影響寥殖,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜涩蜘,卻給世界環(huán)境...
    茶點故事閱讀 41,437評論 3 331
  • 文/蒙蒙 一嚼贡、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧皱坛,春花似錦编曼、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,993評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至贩猎,卻和暖如春熊户,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背吭服。 一陣腳步聲響...
    開封第一講書人閱讀 33,107評論 1 271
  • 我被黑心中介騙來泰國打工嚷堡, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人艇棕。 一個月前我還...
    沈念sama閱讀 48,308評論 3 372
  • 正文 我出身青樓蝌戒,卻偏偏與公主長得像,于是被迫代替她去往敵國和親沼琉。 傳聞我的和親對象是個殘疾皇子北苟,可洞房花燭夜當晚...
    茶點故事閱讀 45,037評論 2 355

推薦閱讀更多精彩內(nèi)容