CornerNet: Detecting Objects as Paired Keypoints閱讀筆記

1 要解決的問題

基于anchor 的目標(biāo)檢測(cè)算法存在的弊端:
1:首先灶挟,需要大量的anchor boxes來保證與ground truth都充分重疊,但是最后真正作為正樣本的只是其中很少的一部分,這樣導(dǎo)致嚴(yán)重的正負(fù)樣本不均衡录择,也會(huì)極大降低訓(xùn)練速度。
2:其二绿映,anchor boxes 會(huì)相應(yīng)的引入大量的超參數(shù)丹泉,數(shù)量,長寬比帆精,大小等等较屿,這些參數(shù)的選擇是根據(jù)特定的檢測(cè)物體設(shè)定的,不具有普適性实幕,而且FPN中多尺度預(yù)測(cè)需要自己獨(dú)特的anchor boxes,這樣會(huì)使計(jì)算相當(dāng)?shù)膹?fù)雜吝镣。

2 怎么解決

anchor free,直接拋棄anchors,用物體的左上角點(diǎn)和右下角點(diǎn)完成物體定位。
首先通過Hourglass 網(wǎng)絡(luò)昆庇,然后是兩個(gè)角點(diǎn)預(yù)測(cè)模塊末贾,分別做左上角的corner pooling 和右下角的corner pooling 得到兩個(gè)heatmap ,Embeddings,Offsets。


3 corner pooling

具體操作十分簡(jiǎn)單整吆,看下圖一目了然拱撵,左上角點(diǎn)的corner pooling就是從右向左,從下到上一排一排的掃描feature map,當(dāng)前值大于等于現(xiàn)在掃描像素最大值時(shí)不變表蝙,小于最大值時(shí)將當(dāng)前像素值更新最大值拴测。



公式如下:



最后將tij +lij 的結(jié)果作為最后heatmap.

4 如何匹配檢測(cè)的角點(diǎn)

架構(gòu)圖中Embeddings專門用于匹配左上角點(diǎn)和右下角點(diǎn),如果一個(gè)左上角點(diǎn)的Embedding vector和右下角點(diǎn)的Embedding vector 距離最小府蛇,那么它們組成一個(gè)object box集索。
訓(xùn)練Embeddings方法如下:
etk 表示左上角點(diǎn)的Embedding vector ,ebk表示右下角點(diǎn)的Embedding vector汇跨。
ek是etk和ebk的平均值务荆。△值設(shè)置為1穷遂。Lpull 用于拉近同一個(gè)物體左上角點(diǎn)和右下角點(diǎn)Embeddings距離函匕,Lpush用于是不同物體的Embeddings 距離增大。


5 整體架構(gòu)

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末蚪黑,一起剝皮案震驚了整個(gè)濱河市盅惜,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌忌穿,老刑警劉巖抒寂,帶你破解...
    沈念sama閱讀 221,635評(píng)論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異伴网,居然都是意外死亡蓬推,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,543評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門澡腾,熙熙樓的掌柜王于貴愁眉苦臉地迎上來沸伏,“玉大人糕珊,你說我怎么就攤上這事∫阍悖” “怎么了红选?”我有些...
    開封第一講書人閱讀 168,083評(píng)論 0 360
  • 文/不壞的土叔 我叫張陵,是天一觀的道長姆另。 經(jīng)常有香客問我喇肋,道長,這世上最難降的妖魔是什么迹辐? 我笑而不...
    開封第一講書人閱讀 59,640評(píng)論 1 296
  • 正文 為了忘掉前任蝶防,我火速辦了婚禮,結(jié)果婚禮上明吩,老公的妹妹穿的比我還像新娘间学。我一直安慰自己,他們只是感情好印荔,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,640評(píng)論 6 397
  • 文/花漫 我一把揭開白布低葫。 她就那樣靜靜地躺著,像睡著了一般仍律。 火紅的嫁衣襯著肌膚如雪嘿悬。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,262評(píng)論 1 308
  • 那天水泉,我揣著相機(jī)與錄音善涨,去河邊找鬼。 笑死草则,一個(gè)胖子當(dāng)著我的面吹牛躯概,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播畔师,決...
    沈念sama閱讀 40,833評(píng)論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼牧牢!你這毒婦竟也來了看锉?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,736評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤塔鳍,失蹤者是張志新(化名)和其女友劉穎伯铣,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體轮纫,經(jīng)...
    沈念sama閱讀 46,280評(píng)論 1 319
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡腔寡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,369評(píng)論 3 340
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了掌唾。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片放前。...
    茶點(diǎn)故事閱讀 40,503評(píng)論 1 352
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡忿磅,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出凭语,到底是詐尸還是另有隱情葱她,我是刑警寧澤,帶...
    沈念sama閱讀 36,185評(píng)論 5 350
  • 正文 年R本政府宣布似扔,位于F島的核電站吨些,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏炒辉。R本人自食惡果不足惜豪墅,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,870評(píng)論 3 333
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望黔寇。 院中可真熱鬧偶器,春花似錦、人聲如沸啡氢。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,340評(píng)論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽倘是。三九已至亭枷,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間搀崭,已是汗流浹背叨粘。 一陣腳步聲響...
    開封第一講書人閱讀 33,460評(píng)論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留瘤睹,地道東北人升敲。 一個(gè)月前我還...
    沈念sama閱讀 48,909評(píng)論 3 376
  • 正文 我出身青樓,卻偏偏與公主長得像轰传,于是被迫代替她去往敵國和親驴党。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,512評(píng)論 2 359

推薦閱讀更多精彩內(nèi)容