2019-01-31 上限分析(ceiling analysis)

上限分析通常能提供一種很有價值的信號或者說很有用的導(dǎo)向告訴你流水線中的哪個部分最值得你花時間。

舉例:數(shù)值評價量度强饮,字符準(zhǔn)確度,圖像中的文字識別正確的比例

上限分析的主要思想:

首先關(guān)注這個機(jī)器學(xué)習(xí)流程中的第一個模塊文字檢測行您,歷每個測試集樣本,然后人為地告訴算法每一個測試樣本中什么地方出現(xiàn)了文字娃循,即100%正確地檢測出圖片中的文字信息。然后繼續(xù)運(yùn)行完接下來的幾個模塊笛质,也就是字符分割和字符識別捞蚂,然后使用跟之前一樣的評價量度指標(biāo)來測量整個系統(tǒng)的總體準(zhǔn)確度。假如準(zhǔn)確定提升敲霍,則改進(jìn)文字檢測有機(jī)會可以整體提高系統(tǒng)的準(zhǔn)確性丁存。用標(biāo)準(zhǔn)的文字檢測結(jié)果,同時用標(biāo)準(zhǔn)的字符分割結(jié)果柱嫌,遍歷測試樣本得到準(zhǔn)確率。

上限分析

進(jìn)行上限分析的一個好處是知道了如果對每一個模塊進(jìn)行改善 它們各自的上升空間是多大与学。

如果我們擁有完美的文字檢測模塊嘉抓,那么整個系統(tǒng)的表現(xiàn)將會從準(zhǔn)確率72%上升到89%,因此效果的增益是17%卵佛。這就意味著如果你在現(xiàn)有系統(tǒng)的基礎(chǔ)上花費(fèi)時間和精力改善文字檢測模塊的效果敞斋,那么系統(tǒng)的表現(xiàn)可能會提高17%看起來這還挺值得。但是系統(tǒng)表現(xiàn)只提升了1%植捎,這便提供了一個很重要的信息告訴我們不管我們投入多大精力在字符分割上,系統(tǒng)效果的潛在上升空間也都是很小很小蚓峦。

示例
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末暑椰,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子一汽,更是在濱河造成了極大的恐慌,老刑警劉巖沾谓,帶你破解...
    沈念sama閱讀 217,185評論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件戳鹅,死亡現(xiàn)場離奇詭異,居然都是意外死亡妇穴,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,652評論 3 393
  • 文/潘曉璐 我一進(jìn)店門腾它,熙熙樓的掌柜王于貴愁眉苦臉地迎上來死讹,“玉大人,你說我怎么就攤上這事妓忍±⒌” “怎么了?”我有些...
    開封第一講書人閱讀 163,524評論 0 353
  • 文/不壞的土叔 我叫張陵旁瘫,是天一觀的道長琼蚯。 經(jīng)常有香客問我,道長遭庶,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,339評論 1 293
  • 正文 為了忘掉前任台诗,我火速辦了婚禮赐俗,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘粱快。我一直安慰自己叔扼,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,387評論 6 391
  • 文/花漫 我一把揭開白布鳍咱。 她就那樣靜靜地躺著与柑,像睡著了一般谤辜。 火紅的嫁衣襯著肌膚如雪价捧。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,287評論 1 301
  • 那天脯倚,我揣著相機(jī)與錄音嵌屎,去河邊找鬼。 笑死舔稀,一個胖子當(dāng)著我的面吹牛掌测,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播汞斧,決...
    沈念sama閱讀 40,130評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼粘勒,長吁一口氣:“原來是場噩夢啊……” “哼竞端!你這毒婦竟也來了庙睡?” 一聲冷哼從身側(cè)響起技俐,我...
    開封第一講書人閱讀 38,985評論 0 275
  • 序言:老撾萬榮一對情侶失蹤雕擂,失蹤者是張志新(化名)和其女友劉穎贱勃,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體贵扰,經(jīng)...
    沈念sama閱讀 45,420評論 1 313
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡戚绕,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,617評論 3 334
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了舞丛。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,779評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡拴还,死狀恐怖欧聘,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情费封,我是刑警寧澤蒋伦,帶...
    沈念sama閱讀 35,477評論 5 345
  • 正文 年R本政府宣布,位于F島的核電站痕届,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏锤窑。R本人自食惡果不足惜嚷炉,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,088評論 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧隧膏,春花似錦嚷那、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,716評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至娘摔,卻和暖如春唤反,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背彤侍。 一陣腳步聲響...
    開封第一講書人閱讀 32,857評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留晒奕,地道東北人名斟。 一個月前我還...
    沈念sama閱讀 47,876評論 2 370
  • 正文 我出身青樓,卻偏偏與公主長得像砰盐,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子囊骤,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,700評論 2 354

推薦閱讀更多精彩內(nèi)容

  • ORA-00001: 違反唯一約束條件 (.) 錯誤說明:當(dāng)在唯一索引所對應(yīng)的列上鍵入重復(fù)值時淘捡,會觸發(fā)此異常池摧。 O...
    我想起個好名字閱讀 5,311評論 0 9
  • 北京時間6月14日23時,2018年世界杯揭幕戰(zhàn)在莫斯科盧日尼基體育場舉行作彤,東道主俄羅斯迎戰(zhàn)沙特阿拉伯乌逐。上半...
    一念唯歌閱讀 783評論 7 23
  • ①中島衛(wèi)生巾區(qū) 圖1總體陳列包裝雜亂创葡,高低不平浙踢,不符合品牌與店鋪形象灿渴。 圖2、3重新組合和擺放這樣不但整齊骚露,也給顧...
    卓林林閱讀 569評論 0 0
  • 隨著自己心意棘幸,每天一篇,回頭看看误续,應(yīng)該會不錯。
    影瓊gege閱讀 261評論 0 0