分類器評(píng)估方法:精確度-召回率-F度量(precision-recall-F_measures)

Precision和Recall都能夠從下面的TP,TN,FP,FN里面計(jì)算出來惯吕。

幾個(gè)縮寫的含義

縮寫 含義
P condition positive
N condition negative
TP true positive (with hit)
TN true negative (with correct rejection)
FP false positive (with false alarm, Type I error)
FN false negative (with miss, Type II error)

TP: 我認(rèn)為是真的循狰,結(jié)果確實(shí)是真的
TN: 我認(rèn)為是假的,結(jié)果確實(shí)是假的
FP: 我認(rèn)為是真的,結(jié)果是假的
FN: 我認(rèn)為是假的,結(jié)果是真的

T / F: 表名我預(yù)測(cè)的結(jié)果的真假
P / N: 表名我所認(rèn)為的真還是假

image

precision和recall的進(jìn)一步解釋

image

precision和accuracy的區(qū)別

簡(jiǎn)單的來說窒篱,給定一組測(cè)量點(diǎn)的集合:

精確(precision): 所有的測(cè)量點(diǎn)到測(cè)量點(diǎn)集合的均值非常接近,與測(cè)量點(diǎn)的方差有關(guān)舶沿。就是說各個(gè)點(diǎn)緊密的聚合在一起墙杯。

準(zhǔn)確(accuracy): 所有的測(cè)量點(diǎn)到真實(shí)值非常接近。與測(cè)量點(diǎn)的偏差有關(guān)括荡。

以上兩個(gè)概念是相互獨(dú)立的高镐,因此數(shù)據(jù)點(diǎn)集合可以使accurate的,也可以使precise的畸冲,還可以都不是或者都是嫉髓。

image

二元分類問題

image
from sklearn import metrics
y_pred = [0, 1, 0, 0]
y_true = [0, 1, 0, 1]
print(metrics.precision_score(y_true, y_pred))   # 1.0
print(metrics.recall_score(y_true, y_pred))     # 0.5

# beta值越小,表示越看中precision
# beta值越大召夹,表示越看中recall
print(metrics.f1_score(y_true, y_pred))   # 0.666666666667
print(metrics.fbeta_score(y_true, y_pred, beta=0.5))  # 0.833333333333
print(metrics.fbeta_score(y_true, y_pred, beta=1))    # 0.666666666667
print(metrics.fbeta_score(y_true, y_pred, beta=2))    # 0.555555555556

將二元分類指標(biāo)拓展到多類和或多標(biāo)簽問題中

image
from sklearn import metrics
y_pred = [0, 1, 2, 0, 1, 2]
y_true = [0, 2, 1, 0, 0, 1]
print(metrics.precision_score(y_true, y_pred, average='macro'))
print(metrics.recall_score(y_true, y_pred, average='micro'))    

print(metrics.f1_score(y_true, y_pred, average='weighted')) 
print(metrics.fbeta_score(y_true, y_pred, beta=0.5, average='macro'))  
print(metrics.precision_recall_fscore_support(y_true, y_pred, beta=0.5, average=None))
image
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末岩喷,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子监憎,更是在濱河造成了極大的恐慌,老刑警劉巖婶溯,帶你破解...
    沈念sama閱讀 222,252評(píng)論 6 516
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件鲸阔,死亡現(xiàn)場(chǎng)離奇詭異偷霉,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)褐筛,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,886評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門类少,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人渔扎,你說我怎么就攤上這事硫狞。” “怎么了晃痴?”我有些...
    開封第一講書人閱讀 168,814評(píng)論 0 361
  • 文/不壞的土叔 我叫張陵残吩,是天一觀的道長(zhǎng)。 經(jīng)常有香客問我倘核,道長(zhǎng)泣侮,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,869評(píng)論 1 299
  • 正文 為了忘掉前任紧唱,我火速辦了婚禮活尊,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘漏益。我一直安慰自己蛹锰,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,888評(píng)論 6 398
  • 文/花漫 我一把揭開白布绰疤。 她就那樣靜靜地躺著铜犬,像睡著了一般。 火紅的嫁衣襯著肌膚如雪峦睡。 梳的紋絲不亂的頭發(fā)上翎苫,一...
    開封第一講書人閱讀 52,475評(píng)論 1 312
  • 那天,我揣著相機(jī)與錄音榨了,去河邊找鬼煎谍。 笑死,一個(gè)胖子當(dāng)著我的面吹牛龙屉,可吹牛的內(nèi)容都是我干的呐粘。 我是一名探鬼主播,決...
    沈念sama閱讀 41,010評(píng)論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼转捕,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼作岖!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起五芝,我...
    開封第一講書人閱讀 39,924評(píng)論 0 277
  • 序言:老撾萬榮一對(duì)情侶失蹤痘儡,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后枢步,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體沉删,經(jīng)...
    沈念sama閱讀 46,469評(píng)論 1 319
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡渐尿,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,552評(píng)論 3 342
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了矾瑰。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片砖茸。...
    茶點(diǎn)故事閱讀 40,680評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖殴穴,靈堂內(nèi)的尸體忽然破棺而出凉夯,到底是詐尸還是另有隱情,我是刑警寧澤采幌,帶...
    沈念sama閱讀 36,362評(píng)論 5 351
  • 正文 年R本政府宣布劲够,位于F島的核電站,受9級(jí)特大地震影響植榕,放射性物質(zhì)發(fā)生泄漏再沧。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,037評(píng)論 3 335
  • 文/蒙蒙 一尊残、第九天 我趴在偏房一處隱蔽的房頂上張望炒瘸。 院中可真熱鬧,春花似錦寝衫、人聲如沸顷扩。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,519評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽隘截。三九已至,卻和暖如春汹胃,著一層夾襖步出監(jiān)牢的瞬間婶芭,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,621評(píng)論 1 274
  • 我被黑心中介騙來泰國打工着饥, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留犀农,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 49,099評(píng)論 3 378
  • 正文 我出身青樓宰掉,卻偏偏與公主長(zhǎng)得像呵哨,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子轨奄,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,691評(píng)論 2 361

推薦閱讀更多精彩內(nèi)容