HAMBox: Delving into Online High-quality Anchors Mining for Detecting Outer Faces

Outer Faces: 不能夠匹配足夠數(shù)量的positive anchors的人臉沽甥;

High-quality anchors: 回歸Bounding Boxes與對(duì)應(yīng)的ground truth的IoU大于0.5的這些anchors俐填;

1. 介紹

文章基于Anchors框架安接,作者提到,有效的anchor設(shè)計(jì)非常重要英融,這直接影響了FD的性能盏檐。如何選擇anchor尺寸仍然是個(gè)難點(diǎn),一般會(huì)存在錯(cuò)位現(xiàn)象驶悟,如下圖所示:


Fig 1

(a) 圖表示在不同anchor尺度下胡野,每個(gè)ground truth face 匹配的平均anchor數(shù)量;

(b) 圖表示在不同anchor尺度下痕鳍,可以匹配到anchors的人臉的比例硫豆。

從圖中可以看出,雖然隨著anchor 尺度的增大笼呆,每個(gè)人臉匹配的anchors數(shù)量增多熊响,但是能匹配anchors的真實(shí)人臉比例在下降汗茄,這種錯(cuò)位現(xiàn)象啟發(fā)anchor scales的設(shè)計(jì)。

為了解決這種錯(cuò)位現(xiàn)象瞳腌,有兩個(gè)代表性的方法:

1)S^3F D通過增加offsetting anchors的anchor補(bǔ)償策略,補(bǔ)償 outer faces挑宠;

2) Zhu et al 指定了EMO評(píng)價(jià)標(biāo)準(zhǔn)瞭空,進(jìn)而設(shè)計(jì)更合理的anchor stride和感受野南捂。

盡管這些方法幫助outer faces匹配了更多的anchors,但是也生成了大量冗余或者低質(zhì)量的anchors鞭缭。

Fig 2 performance of compensated anchors

從上圖中可以看到,補(bǔ)償?shù)腶nchors與ground truth 產(chǎn)生的平均IoU只有0.42仑濒,所以這種方法使得outer faces匹配到了更多低質(zhì)量的anchors。

作者利用PyramidBox作為Face detector進(jìn)行anchor匹配統(tǒng)計(jì)實(shí)驗(yàn),發(fā)現(xiàn)了一個(gè)非常有趣的現(xiàn)象瞭吃,如下如所示:

這里紅色曲線是累計(jì)IoU的累計(jì)分布曲線,其中IoU是ground truth與可以被正確預(yù)測(cè)的回歸anchors和蚪,這里采用的閾值為0.35,只有在訓(xùn)練階段當(dāng)IoU大于0.35的anchor催束,才被認(rèn)為是匹配的anchors。下圖我們可以發(fā)現(xiàn),inference階段罕容,回歸大于0.35的ancho只值占11%露泊,所以作者認(rèn)為梧喷,不僅僅是匹配的anchors汇歹,那些未匹配的anchors同樣有著重要的地位。然而痰哨,在訓(xùn)練階段,那些未匹配的anchors被認(rèn)為是背景,這是不合理的游昼。如何有效利用這些未匹配的anchors對(duì)提升人臉檢測(cè)的性能非常重要。

Fig 3 Comulative Desity Curve of IoU

作者通過定義High-quality Anchors闲昭,如下圖所示鸯绿,可以看出有65%的High-quality Anchors在訓(xùn)練階段是為匹配的∠鲜郑基于此,作者認(rèn)為當(dāng)前的anchors機(jī)制是不靈活的牺六,并且沒有充分利用anchors。

Fig 4 Proportion of High quality anchors

為了說明大部分回歸的bounding boxes都是未匹配的在訓(xùn)練階段未匹配的anchors艘蹋,作者利用下圖進(jìn)行描述:

其中橫坐標(biāo)表示與ground truth匹配的anchors數(shù)量,縱坐標(biāo)表示在匹配anchors數(shù)量一定的情況下,滿足當(dāng)前條件人臉的數(shù)量。

a) 紅色柱狀圖表示雕薪,在訓(xùn)練階段,當(dāng)IoU>0.35時(shí)蜈亩,與anchors匹配的人臉數(shù)量港华;

b) 藍(lán)色柱狀圖表示,在IoU>0.5時(shí),與回歸的bounding box匹配的人臉數(shù)量;這也就是經(jīng)過網(wǎng)絡(luò)回歸后High-quality Anchors的數(shù)量;

c) 綠色的圖表示,High-quality Anchors經(jīng)過NMS后,剩余的High-quality Anchors的數(shù)量。

Fig 5 Performance of Matched High-quality Anchors

上圖可以做如下解釋选浑,例如Number of Anchors = 時(shí)读恃,red = 3257胆数,經(jīng)過網(wǎng)絡(luò)回歸后,High-quality Anchors = 2442,再經(jīng)過NMS后,High-quality Anchors = 316。這里說明316個(gè)High-quality anchors是matched anchors回歸得到的,但是剩下的High-quality Anchors=2442-316=2126,這么多的High-quality Anchors怎么來的箩帚?焕参?作者認(rèn)為這些High-quality Anchors是由訓(xùn)練階段的未匹配Anchors回歸得到的刻帚,所以作者認(rèn)為訓(xùn)練階段未匹配的Anchors也有很強(qiáng)的回歸的能力顷歌。

為了進(jìn)一步說明和驗(yàn)證上述問題赦抖,作者提出了 Online High-quality Anchor Mining Strategy(HAMBox)。這個(gè)方法的思路就是挖掘那些隱藏的High-quality anchors 去給outer faces補(bǔ)償更多的anchors,從而提高回歸的準(zhǔn)確性盈电。

2. Online High-quality Anchors Mining

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市匆帚,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌嚎幸,老刑警劉巖,帶你破解...
    沈念sama閱讀 210,914評(píng)論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件椎镣,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)翎蹈,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 89,935評(píng)論 2 383
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來肮塞,“玉大人襟齿,你說我怎么就攤上這事≌碚裕” “怎么了猜欺?”我有些...
    開封第一講書人閱讀 156,531評(píng)論 0 345
  • 文/不壞的土叔 我叫張陵,是天一觀的道長拷窜。 經(jīng)常有香客問我开皿,道長,這世上最難降的妖魔是什么篮昧? 我笑而不...
    開封第一講書人閱讀 56,309評(píng)論 1 282
  • 正文 為了忘掉前任赋荆,我火速辦了婚禮,結(jié)果婚禮上恋谭,老公的妹妹穿的比我還像新娘糠睡。我一直安慰自己,他們只是感情好疚颊,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,381評(píng)論 5 384
  • 文/花漫 我一把揭開白布狈孔。 她就那樣靜靜地躺著信认,像睡著了一般。 火紅的嫁衣襯著肌膚如雪均抽。 梳的紋絲不亂的頭發(fā)上嫁赏,一...
    開封第一講書人閱讀 49,730評(píng)論 1 289
  • 那天,我揣著相機(jī)與錄音油挥,去河邊找鬼潦蝇。 笑死,一個(gè)胖子當(dāng)著我的面吹牛深寥,可吹牛的內(nèi)容都是我干的攘乒。 我是一名探鬼主播,決...
    沈念sama閱讀 38,882評(píng)論 3 404
  • 文/蒼蘭香墨 我猛地睜開眼惋鹅,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼则酝!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起闰集,我...
    開封第一講書人閱讀 37,643評(píng)論 0 266
  • 序言:老撾萬榮一對(duì)情侶失蹤沽讹,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后武鲁,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體爽雄,經(jīng)...
    沈念sama閱讀 44,095評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,448評(píng)論 2 325
  • 正文 我和宋清朗相戀三年沐鼠,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了挚瘟。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 38,566評(píng)論 1 339
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡饲梭,死狀恐怖刽沾,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情排拷,我是刑警寧澤,帶...
    沈念sama閱讀 34,253評(píng)論 4 328
  • 正文 年R本政府宣布锅尘,位于F島的核電站监氢,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏藤违。R本人自食惡果不足惜浪腐,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,829評(píng)論 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望顿乒。 院中可真熱鬧议街,春花似錦、人聲如沸璧榄。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,715評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至涂身,卻和暖如春雄卷,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背蛤售。 一陣腳步聲響...
    開封第一講書人閱讀 31,945評(píng)論 1 264
  • 我被黑心中介騙來泰國打工丁鹉, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人悴能。 一個(gè)月前我還...
    沈念sama閱讀 46,248評(píng)論 2 360
  • 正文 我出身青樓揣钦,卻偏偏與公主長得像,于是被迫代替她去往敵國和親漠酿。 傳聞我的和親對(duì)象是個(gè)殘疾皇子冯凹,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,440評(píng)論 2 348

推薦閱讀更多精彩內(nèi)容