圖解精度和召回率

下面這個(gè)圖表示了精度和召回率這兩個(gè)指標(biāo),主要用在于分類問題中共苛。


圖片發(fā)自簡(jiǎn)書App


例如有一個(gè)二分類問題的算法。

圖中的圓圈里面代表算法判定為正的一些樣本。

圓圈的外面代表算法判定為負(fù)的一些樣本催首。

但實(shí)際上算法它是會(huì)有一些東西誤判的。

例如方形的左邊一半泄鹏,是實(shí)際上為正的樣本郎任。右邊一半,是實(shí)際上為負(fù)的樣本备籽。那除了算法判斷正確的,以外车猬,就是判斷錯(cuò)誤的樣本霉猛。

可以對(duì)照這個(gè)圖,看一下準(zhǔn)確率珠闰,精度惜浅,和召回率的定義。

右上角是準(zhǔn)確率的公式伏嗜。意思就是坛悉,算法的所有預(yù)測(cè)結(jié)果中,預(yù)測(cè)正確的有多少

左下角為 precision 精度 查準(zhǔn)率就是對(duì)于所有機(jī)器判定為正的里面承绸,有多大的比例是真的正樣本

右下角為 recall 召回率 查全率裸影,顧名思義,就是實(shí)際的正樣本中军熏,有多大比例被檢出了

在圖中有標(biāo)記轩猩,陰陽,真假。

真/假 陰/陽性中界轩,陰陽性是指的分類器的判斷結(jié)果是陰性還是陽性画饥,而真假指代的是是否和真是答案相符

不同的問題,他需要用的指標(biāo)浊猾,希望達(dá)到的目標(biāo)是不一樣的抖甘。

我們根據(jù)召回率這個(gè)名字,可以考慮一個(gè)葫慎,召回的例子衔彻。

例如有一個(gè)汽車公司,他們有一些車發(fā)現(xiàn)有問題偷办,

于是就要召回艰额,他們告訴了車主判斷問題的方法,

有些車是真的有問題椒涯,但是車主沒判斷出來柄沮,

有些車沒問題,但車主認(rèn)為有問題废岂,

這個(gè)時(shí)候公司就要計(jì)算一下召回率祖搓,看有問題的車被召回了多少。

精度—召回率 之間存在制衡

隨著精度的增加湖苞,召回率會(huì)降低拯欧,召回率增加,精度就會(huì)降低财骨。

有時(shí)如果需要召回率高镐作,就可以接受較低的精度。

如果我們想要找到精度和召回率的最佳組合隆箩,我們可以使用 F1 score 來對(duì)兩者進(jìn)行結(jié)合该贾。

F1 score 是對(duì)精度和召回率的調(diào)和平均,有個(gè)公式

如果我們想創(chuàng)建一個(gè)具有最佳的精度—召回率平衡的模型捌臊,那么就要嘗試將 F1 score 最大化杨蛋。

在實(shí)際應(yīng)用時(shí),因?yàn)槭欠诸愃惴ㄍ奘簦瑫?huì)有一個(gè)閾值,當(dāng)結(jié)果高于這個(gè)閾值時(shí)為一類护姆,低于這個(gè)閾值時(shí)為另一類矾端。

對(duì)每個(gè)閾值可以計(jì)算相應(yīng)的 精度 召回率 f1 等指標(biāo),


圖片發(fā)自簡(jiǎn)書App


通過更改閾值卵皂,這些指標(biāo)都會(huì)變化秩铆,

如果想要精度和召回率平衡,可以選擇最大化 F1 score 時(shí)候的閾值

例如上圖,基于 F1 score殴玛,整體最佳的模型出現(xiàn)在閾值為 0.5 的地方捅膘。

如果我們想要在更大程度上強(qiáng)調(diào)精度或者召回率,我們可以選擇這些指標(biāo)上最佳時(shí)對(duì)應(yīng)的模型滚粟。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末寻仗,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子凡壤,更是在濱河造成了極大的恐慌署尤,老刑警劉巖,帶你破解...
    沈念sama閱讀 216,997評(píng)論 6 502
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件亚侠,死亡現(xiàn)場(chǎng)離奇詭異曹体,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)硝烂,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,603評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門箕别,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人滞谢,你說我怎么就攤上這事串稀。” “怎么了爹凹?”我有些...
    開封第一講書人閱讀 163,359評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵厨诸,是天一觀的道長(zhǎng)。 經(jīng)常有香客問我禾酱,道長(zhǎng)微酬,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,309評(píng)論 1 292
  • 正文 為了忘掉前任颤陶,我火速辦了婚禮颗管,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘滓走。我一直安慰自己垦江,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,346評(píng)論 6 390
  • 文/花漫 我一把揭開白布搅方。 她就那樣靜靜地躺著比吭,像睡著了一般。 火紅的嫁衣襯著肌膚如雪姨涡。 梳的紋絲不亂的頭發(fā)上衩藤,一...
    開封第一講書人閱讀 51,258評(píng)論 1 300
  • 那天,我揣著相機(jī)與錄音涛漂,去河邊找鬼赏表。 笑死检诗,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的瓢剿。 我是一名探鬼主播逢慌,決...
    沈念sama閱讀 40,122評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼间狂!你這毒婦竟也來了攻泼?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 38,970評(píng)論 0 275
  • 序言:老撾萬榮一對(duì)情侶失蹤前标,失蹤者是張志新(化名)和其女友劉穎坠韩,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體炼列,經(jīng)...
    沈念sama閱讀 45,403評(píng)論 1 313
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡只搁,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,596評(píng)論 3 334
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了俭尖。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片氢惋。...
    茶點(diǎn)故事閱讀 39,769評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖稽犁,靈堂內(nèi)的尸體忽然破棺而出焰望,到底是詐尸還是另有隱情,我是刑警寧澤已亥,帶...
    沈念sama閱讀 35,464評(píng)論 5 344
  • 正文 年R本政府宣布熊赖,位于F島的核電站,受9級(jí)特大地震影響虑椎,放射性物質(zhì)發(fā)生泄漏震鹉。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,075評(píng)論 3 327
  • 文/蒙蒙 一捆姜、第九天 我趴在偏房一處隱蔽的房頂上張望传趾。 院中可真熱鬧,春花似錦泥技、人聲如沸浆兰。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,705評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽簸呈。三九已至,卻和暖如春店茶,著一層夾襖步出監(jiān)牢的瞬間蜕便,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,848評(píng)論 1 269
  • 我被黑心中介騙來泰國打工忽妒, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留玩裙,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 47,831評(píng)論 2 370
  • 正文 我出身青樓段直,卻偏偏與公主長(zhǎng)得像吃溅,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子鸯檬,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,678評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容