神經(jīng)網(wǎng)絡(luò)評估指標(biāo)學(xué)習(xí)筆記

本博客內(nèi)容來源于網(wǎng)絡(luò)以及其他書籍猖吴,結(jié)合自己學(xué)習(xí)的心得進行重編輯,因為看了很多文章不便一一標(biāo)注引用挥转,如圖片文字等侵權(quán)海蔽,請告知刪除。

傳統(tǒng)2D計算機視覺學(xué)習(xí)筆記目錄------->傳送門
傳統(tǒng)3D計算機視覺學(xué)習(xí)筆記目錄------->傳送門
深度學(xué)習(xí)學(xué)習(xí)筆記目錄 ------------------->傳送門

前言

新年好啊扁位,新年好啊准潭,祝福大家新年好! 明天就是元旦域仇,希望自己和小伙伴們都能在新的一年內(nèi)刑然,學(xué)業(yè)進步,工作順利暇务,生活順利泼掠。

自從開始在簡書記錄自己的學(xué)習(xí)過程已經(jīng)有四五個月了,寫了也有三十多篇文章垦细,在這個過程也收貨了很多择镇,能明顯感受到對一些東西的理解加深了,不再是模棱兩可了括改,印象也更深了腻豌。在此過程中,也認(rèn)識了很多的朋友,明年一起努力呀吝梅。


新年快樂

祝福語寫完了虱疏,圓規(guī)正轉(zhuǎn)。本文將一些常見的神經(jīng)網(wǎng)絡(luò)評估的指標(biāo)記錄一下苏携,誰讓我經(jīng)常忘記搞混呢做瞪。

常見評估指標(biāo)

下面列舉一些在使用中經(jīng)常計算的神經(jīng)網(wǎng)絡(luò)的評估指標(biāo)的計算方式以及個人理解。想了很多中辦法解釋右冻,還是舉個例子比較好装蓬。

例子嗎,最近看到一個比較厲害的纱扭,在王自如與劉翔的一組圖中找出劉翔牍帚。

假如,只能假如了(因為我也分不清)乳蛾,其中有3個是劉翔履羞,其他的是王自如,這就是真實值了屡久。但是我們的模型找出了5個劉翔,但是其中只有兩個劉翔是對的爱榔。

現(xiàn)在我們定義幾個概念:

  • 真正例(TP):實際上是正例的數(shù)據(jù)點被標(biāo)記為正例被环,劉翔的照片被識別為劉翔,則TP的數(shù)目是2

  • 假正例(FP):實際上是反例的數(shù)據(jù)點被標(biāo)記為正例详幽,非劉翔的照片被識別為劉翔筛欢,則FP的數(shù)目是3

  • 真反例(TN):實際上是反例的數(shù)據(jù)點被標(biāo)記為反例,非劉翔的照片被識別為非劉翔唇聘,則TN的數(shù)目是2

  • 假反例(FN):實際上是正例的數(shù)據(jù)點被標(biāo)記為反例版姑,劉翔的照片被識別為非劉翔,則FN的數(shù)目是1

  • 誤差(Loss)

誤差這個就比較簡單了迟郎,是我們的優(yōu)化目標(biāo)剥险,誤差越小,我們基本上可以認(rèn)為我們的效果在訓(xùn)練集上或者驗證集上效果會更好宪肖,模型更接近最優(yōu)解表制。誤差的獲得當(dāng)然就是通過我們的損失函數(shù)獲得了的。

  • 準(zhǔn)確率(Accuracy)

準(zhǔn)確率計算的是預(yù)測正確的樣本數(shù) 占全部預(yù)測正確樣本數(shù)的比例控乾。
即 : (TP+TN)/(TP+FP+TN+FN)
對應(yīng)例子中的解就是4/8 = 0.5

  • 誤檢率(false positve)

誤檢率就是預(yù)測錯誤的數(shù)目與所有預(yù)測數(shù)目之比
即:FP/(TP+FP)
對應(yīng)例子中的解就是 3/5 = 0.6

  • 精確率(precision)

精確率就是預(yù)測正確的數(shù)目與所有預(yù)測數(shù)目之比
即:TP/(TP+FP)
對應(yīng)例子中的解就是 2/5 = 0.4

  • 召回率(recall)

召回率就是預(yù)測正確的數(shù)目與樣本中所以待預(yù)測的數(shù)目之比
即:TP/(TP+FN)
對應(yīng)例子中的解就是 2/3 = 0.6666

  • 平均精確率(mAP)

字面意思就是所有類別精確率的平均值么介。
對應(yīng)例子中的解就是 (0.4+0.6666)/2 = 0.53333

  • F1-measure

我們先簡單的將其計算公式寫出,之后在一起評價這些優(yōu)缺點蜕衡。
即:2*(召回率×精確率)/(召回率+精確率)
對應(yīng)例子中的解就是 2 * 0.66666 * 0.4/(0.66666+0.4) = 口算不出來就不算了

  • 以上評估標(biāo)準(zhǔn)的評價

我們先看精確率與召回率壤短,我們當(dāng)然希望結(jié)果精確率越高越好,召回率也越高越好,但事實上這兩者在某些情況下是矛盾的久脯。比如極端情況下纳胧,我們只搜出了一個結(jié)果,且是準(zhǔn)確的桶现,那么精確率就是100%躲雅,但是召回率就有可能很低,因為很多正確的結(jié)果沒有找到骡和;而如果我們把所有結(jié)果都返回相赁,那么必然召回率是100%,但是精確率很低慰于。

為了彌補精確率與召回率的矛盾的尷尬钮科,我們提出了F-measure,或者叫F-Score婆赠,F(xiàn)-Measure是Precision和Recall加權(quán)調(diào)和平均绵脯。即:

當(dāng)權(quán)重等于1時,就有F1-measure休里,即:

但是無論是精確率與召回率還是F1-measure 都是針對單類別的評價蛆挫,對于多類別的任務(wù)我們提出了mAP來表達模型的效果。mAP是準(zhǔn)確率-召回率都相關(guān)的全局指標(biāo)妙黍。

總結(jié)

在2019年的最后幾個小時總結(jié)完了這些東西悴侵,雖然簡單,但是也是我保持學(xué)習(xí)的見證拭嫁,2020加油啊可免。

心想事成

重要的事情說三遍:

如果我的文章對您有所幫助做粤,那就點贊加個關(guān)注唄 ( * ^ __ ^ * )

如果我的文章對您有所幫助浇借,那就點贊加個關(guān)注唄 ( * ^ __ ^ * )

如果我的文章對您有所幫助,那就點贊加個關(guān)注唄 ( * ^ __ ^ * )

傳統(tǒng)2D計算機視覺學(xué)習(xí)筆記目錄------->傳送門
傳統(tǒng)3D計算機視覺學(xué)習(xí)筆記目錄------->傳送門
深度學(xué)習(xí)學(xué)習(xí)筆記目錄 ------------------->傳送門

任何人或團體怕品、機構(gòu)全部轉(zhuǎn)載或者部分轉(zhuǎn)載妇垢、摘錄,請保留本博客鏈接或標(biāo)注來源堵泽。博客地址:開飛機的喬巴

作者簡介:開飛機的喬巴(WeChat:zhangzheng-thu)修己,現(xiàn)主要從事機器人抓取視覺系統(tǒng)以及三維重建等3D視覺相關(guān)方面,另外對slam以及深度學(xué)習(xí)技術(shù)也頗感興趣迎罗,歡迎加我微信或留言交流相關(guān)工作睬愤。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市纹安,隨后出現(xiàn)的幾起案子尤辱,更是在濱河造成了極大的恐慌砂豌,老刑警劉巖,帶你破解...
    沈念sama閱讀 219,366評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件光督,死亡現(xiàn)場離奇詭異阳距,居然都是意外死亡,警方通過查閱死者的電腦和手機结借,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,521評論 3 395
  • 文/潘曉璐 我一進店門筐摘,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人船老,你說我怎么就攤上這事咖熟。” “怎么了柳畔?”我有些...
    開封第一講書人閱讀 165,689評論 0 356
  • 文/不壞的土叔 我叫張陵馍管,是天一觀的道長。 經(jīng)常有香客問我薪韩,道長确沸,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,925評論 1 295
  • 正文 為了忘掉前任俘陷,我火速辦了婚禮罗捎,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘拉盾。我一直安慰自己宛逗,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 67,942評論 6 392
  • 文/花漫 我一把揭開白布盾剩。 她就那樣靜靜地躺著,像睡著了一般替蔬。 火紅的嫁衣襯著肌膚如雪告私。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,727評論 1 305
  • 那天承桥,我揣著相機與錄音驻粟,去河邊找鬼。 笑死凶异,一個胖子當(dāng)著我的面吹牛蜀撑,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播剩彬,決...
    沈念sama閱讀 40,447評論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼酷麦,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了喉恋?” 一聲冷哼從身側(cè)響起沃饶,我...
    開封第一講書人閱讀 39,349評論 0 276
  • 序言:老撾萬榮一對情侶失蹤母廷,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后糊肤,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體琴昆,經(jīng)...
    沈念sama閱讀 45,820評論 1 317
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,990評論 3 337
  • 正文 我和宋清朗相戀三年馆揉,在試婚紗的時候發(fā)現(xiàn)自己被綠了业舍。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,127評論 1 351
  • 序言:一個原本活蹦亂跳的男人離奇死亡升酣,死狀恐怖舷暮,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情拗踢,我是刑警寧澤脚牍,帶...
    沈念sama閱讀 35,812評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站巢墅,受9級特大地震影響诸狭,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜君纫,卻給世界環(huán)境...
    茶點故事閱讀 41,471評論 3 331
  • 文/蒙蒙 一驯遇、第九天 我趴在偏房一處隱蔽的房頂上張望串纺。 院中可真熱鬧旷祸,春花似錦、人聲如沸瑞凑。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,017評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至肢执,卻和暖如春枉阵,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背预茄。 一陣腳步聲響...
    開封第一講書人閱讀 33,142評論 1 272
  • 我被黑心中介騙來泰國打工兴溜, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人耻陕。 一個月前我還...
    沈念sama閱讀 48,388評論 3 373
  • 正文 我出身青樓拙徽,卻偏偏與公主長得像,于是被迫代替她去往敵國和親诗宣。 傳聞我的和親對象是個殘疾皇子膘怕,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,066評論 2 355

推薦閱讀更多精彩內(nèi)容