Top-5 分類錯(cuò)誤率
平常我們?cè)诳匆恍┥疃葘W(xué)習(xí)圖像分類的文獻(xiàn)資料的時(shí)候挣惰，經(jīng)常提到ImageNet Top-5 錯(cuò)誤率降到了5%隆判。它是什么意思呢？
ImageNet 項(xiàng)目
首先先說(shuō)一下ImageNet 項(xiàng)目吧！
ImageNet Index
ImageNet 項(xiàng)目是一個(gè)用于物體對(duì)象識(shí)別檢索大型視覺數(shù)據(jù)庫(kù)。截止2016年啰劲，ImageNet 已經(jīng)對(duì)超過(guò)一千萬(wàn)個(gè)圖像的url進(jìn)行手動(dòng)注釋，標(biāo)記圖像的類別檀何。在至少一百萬(wàn)張圖像中還提供了邊界框蝇裤。自2010年以來(lái)，ImageNet 舉辦一年一度的軟件競(jìng)賽频鉴，叫做** ImageNet 大尺度視覺識(shí)別挑戰(zhàn)(ImageNet Large Scale Visual Recognition Challenge, ILSVRC)栓辜。主要內(nèi)容是通過(guò)算法程序?qū)崿F(xiàn)正確分類和探測(cè)識(shí)別物體與場(chǎng)景，評(píng)價(jià)標(biāo)準(zhǔn)就是Top-5 錯(cuò)誤率**垛孔。
Top-5 錯(cuò)誤率
ILSRVRC（ImageNet 圖像分類大賽） 比賽設(shè)置如下：
1000類圖像分類問(wèn)題啃憎，訓(xùn)練數(shù)據(jù)集126萬(wàn)張圖像，驗(yàn)證集5萬(wàn)張似炎，測(cè)試集10萬(wàn)張（標(biāo)注未公布）辛萍。
評(píng)價(jià)標(biāo)準(zhǔn)采用 top-5 錯(cuò)誤率——即對(duì)一張圖像預(yù)測(cè)5個(gè)類別，只要有一個(gè)和人工標(biāo)注類別相同就算對(duì)羡藐，否則算錯(cuò)贩毕。
近幾年ILSRVRC 比賽結(jié)果如下表所示：
| 結(jié)果公布時(shí)間 | 機(jī)構(gòu)top-5錯(cuò)誤率(%) | 模型數(shù) | 方法 |
|---|---|---|---|
| 2015.2.11 | 4.82 | http://arxiv-web3.library.cornell.edu/abs/1502.03167 | |
| 2015.2.6 | MSRA | 4.94 | http://arxiv.org/abs/1502.01852 |
| 2015.2.6 | Baidu | 5.33 | http://arxiv.org/abs/1501.02876 |
| 2015.1.13 | Baidu | 5.98 | —— |
| 2014.8.18 | 6.66 | http://arxiv.org/abs/1409.4842 | |
| 2014.8.18 | Oxford | 7.33 | http://arxiv.org/abs/1409.1556 |
| 2013.11.14 | NYU | 11.7 | http://arxiv.org/abs/1311.2901 |
| 2012.10.13 | U.Toronto | 16.4 | http://www.cs.toronto.edu/~fritz/absps/imagenet.pdf |
