發(fā)簡信
IP屬地：遼寧
-
2021 BDCI 華為零售商品識別競賽一等獎方案分享
【GiantPandaCV導(dǎo)語】上學(xué)期快結(jié)束的時候參加了華為和CCF組織的零售商品識別的比賽舍咖，隊伍名稱為GiantPandaCV隊耻涛，比賽大約持續(xù)...
-
當(dāng)可變形注意力機(jī)制引入Vision Transformer
【GiantPandaCV導(dǎo)語】通過在Transformer基礎(chǔ)上引入Deformable CNN中的可變性能力瓶珊，在降低模型參數(shù)量的同時提升獲取...
-
CoAtNet: 90.88% Paperwithcode榜單第一惦费，層層深入考慮模型設(shè)計
【GiantPandaCV導(dǎo)語】CoAt=Convolution + Attention哮塞，paperwithcode榜單第一名南蹂，通過結(jié)合卷積與T...
-
CeiT：訓(xùn)練更快的多層特征抽取ViT
【GiantPandaCV導(dǎo)語】來自商湯和南洋理工的工作，也是使用卷積來增強(qiáng)模型提出low-level特征的能力囱井，增強(qiáng)模型獲取局部性的能力驹尼，核心...
-
BoTNet:Bottleneck Transformers for Visual Recognition
【GiantPandaCV導(dǎo)語】基于Transformer的骨干網(wǎng)絡(luò)，同時使用卷積與自注意力機(jī)制來保持全局性和局部性庞呕。模型在ResNet最后三個...
-
CvT: 如何將卷積的優(yōu)勢融入Transformer
【GiantPandaCV導(dǎo)語】與之前BoTNet不同新翎，CvT雖然題目中有卷積的字樣，但是實(shí)際總體來說依然是以Transformer Block...
-
CNN住练、Transformer料祠、MLP架構(gòu)的經(jīng)驗性分析
A Battle of Network Structures: An Empirical Study of CNN, Transformer, ...
-
知識蒸餾綜述：代碼整理
【GiantPandaCV導(dǎo)語】收集自RepDistiller中的蒸餾方法，盡可能簡單解釋蒸餾用到的策略澎羞，并提供了實(shí)現(xiàn)源碼。 1. KD: Kn...
-
知識蒸餾綜述:網(wǎng)絡(luò)結(jié)構(gòu)搜索應(yīng)用
【GiantPandaCV導(dǎo)語】知識蒸餾將教師網(wǎng)絡(luò)中的知識遷移到學(xué)生網(wǎng)絡(luò)敛苇，而NAS中天然的存在大量的網(wǎng)絡(luò)妆绞，使用KD有助于提升超網(wǎng)整體性能。兩者結(jié)...