發簡信
IP屬地：黑龍江
-
2021 BDCI 華為零售商品識別競賽一等獎方案分享
【GiantPandaCV導語】上學期快結束的時候參加了華為和CCF組織的零售商品識別的比賽，隊伍名稱為GiantPandaCV隊，比賽大約持續...
-
當可變形注意力機制引入Vision Transformer
【GiantPandaCV導語】通過在Transformer基礎上引入Deformable CNN中的可變性能力，在降低模型參數量的同時提升獲取...
-
CoAtNet: 90.88% Paperwithcode榜單第一，層層深入考慮模型設計
【GiantPandaCV導語】CoAt=Convolution + Attention，paperwithcode榜單第一名，通過結合卷積與T...
-
CeiT：訓練更快的多層特征抽取ViT
【GiantPandaCV導語】來自商湯和南洋理工的工作，也是使用卷積來增強模型提出low-level特征的能力，增強模型獲取局部性的能力，核心...
-
BoTNet:Bottleneck Transformers for Visual Recognition
【GiantPandaCV導語】基于Transformer的骨干網絡，同時使用卷積與自注意力機制來保持全局性和局部性。模型在ResNet最后三個...
-
CvT: 如何將卷積的優勢融入Transformer
【GiantPandaCV導語】與之前BoTNet不同，CvT雖然題目中有卷積的字樣，但是實際總體來說依然是以Transformer Block...
-
CNN、Transformer、MLP架構的經驗性分析
A Battle of Network Structures: An Empirical Study of CNN, Transformer, ...
-
知識蒸餾綜述：代碼整理
【GiantPandaCV導語】收集自RepDistiller中的蒸餾方法，盡可能簡單解釋蒸餾用到的策略，并提供了實現源碼。 1. KD: Kn...
-
知識蒸餾綜述:網絡結構搜索應用
【GiantPandaCV導語】知識蒸餾將教師網絡中的知識遷移到學生網絡，而NAS中天然的存在大量的網絡，使用KD有助于提升超網整體性能。兩者結...