可變形卷積 Deformable Convolution

概念

DCNv1



DCNv2


  • 由輸入特征學(xué)習(xí)得到的偏移量來改變標(biāo)準(zhǔn)卷積的采樣位置,類似于attention機制,特征本身包含了需要關(guān)注的位置的信息,通過卷積將其提取出來,然后反向作用于特征本身。SE通過通道均值和線性層提取需要關(guān)注的層的信息,然后反向作用于層。
  • V1使用卷積給出x,y偏移位置,然后插值提取特征
  • V2除了給出x,y以外還給出額外的權(quán)重控制系數(shù)w,決定卷積核中某個系數(shù)的重要性,取值0~1. 另外還給出了新的Deformable Position-Sensitive (PS) RoI Pooling方法,原理和V2類似。

實現(xiàn)

  • 通過卷積計算出的x,y offset是浮點數(shù),而位置是整數(shù),如何處理?類似于RoiAlign,對特征進(jìn)行插值。
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

友情鏈接更多精彩內(nèi)容