卷積和反卷積

卷積(convolution)

卷積是通過(guò)Filter提取原圖像的特征,F(xiàn)ilter會(huì)隨著梯度下降提取出圖像的主要特征。如圖:


藍(lán)色為原圖,深藍(lán)色為Filter,綠色為提取后的特征

再看看下圖卷積是如何進(jìn)行運(yùn)算的:


輸入,F(xiàn)alter,輸出

細(xì)節(jié)過(guò)程:

卷積細(xì)節(jié)操作
卷積操作實(shí)質(zhì)上表示了一種多對(duì)一的關(guān)系,就如上圖所示通過(guò)一個(gè)Filter將input中的9個(gè)pixel與output中的一個(gè)pixel相對(duì)應(yīng)。

我們將上述過(guò)程用矩陣表示一下
Filter:


image.png

你可能在想這些藍(lán)色的0是怎么來(lái)的?看圖:


Filter

將上圖中的Filter進(jìn)行flatten就可以得到
Filter進(jìn)行flatten

我們將4次的3x3的Filter操作用一個(gè)4x16的矩陣表示:
Convolution Matrix

那么卷積的運(yùn)算就可以用矩陣表示為:


Convolution Matrix operation

將output reshape 成2x2的matrix
output

其結(jié)果和細(xì)節(jié)過(guò)程中的output是一樣的。接下來(lái)我們介紹反卷積。

反卷積(Transposed Convolution)

反卷積,輸入圖片的特征,輸出圖片,起到通過(guò)特征還原原圖的作用。如圖:


藍(lán)色為提取后的特征,陰影為Filter,綠色為原圖

有了上面的Convolution Matrix(4x16),我們對(duì)它進(jìn)行transpose得到Transposed Convolution Matrix(16x4)然后進(jìn)行如下操作:


Transposed Convolution Matrix operation

再將反卷積的output reshape成4x4的矩陣
output

神奇的事情發(fā)生了:通過(guò)Transposed Convolution Matrix 的矩陣乘法,我們將input的特征轉(zhuǎn)變成了與原圖類似結(jié)構(gòu)的圖像。這樣一來(lái)只要我們通過(guò)訓(xùn)練去調(diào)整Transposed Convolution Matrix中的weight,就可以通過(guò)特征盡可能的還原原圖。

反卷積操作實(shí)質(zhì)上表示了一種一對(duì)多的關(guān)系,就如上圖所示通過(guò)一個(gè)Filter將output中的1個(gè)pixel與input中的9個(gè)pixel相對(duì)應(yīng)。

小伙伴們?nèi)绻X(jué)得文章還行的請(qǐng)點(diǎn)個(gè)贊呦??!同時(shí)覺(jué)得文章哪里有問(wèn)題的可以評(píng)論一下 謝謝你!

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書(shū)系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 文章作者:Tyan博客:noahsnail.com | CSDN | 簡(jiǎn)書(shū) 聲明:作者翻譯論文僅為學(xué)習(xí),如有侵權(quán)請(qǐng)...
    SnailTyan閱讀 5,494評(píng)論 1 3
  • CNN on TensorFlow 本文大部分內(nèi)容均參考于: An Intuitive Explanation o...
    _Randolph_閱讀 8,009評(píng)論 2 31
  • 這篇論文跟上一篇的VGG論文一樣,在深度學(xué)習(xí)領(lǐng)域同樣的經(jīng)典,在2015年的CVPR,該論文拿到了best pape...
    云時(shí)之間閱讀 3,795評(píng)論 0 5
  • 《開(kāi)心一笑》 在這個(gè)炎炎夏日,知道誰(shuí)對(duì)你最好嗎? 其實(shí),只有蚊子對(duì)你最好,不離不棄,時(shí)不時(shí)給你一個(gè)紅包,...
    引領(lǐng)馨陽(yáng)閱讀 199評(píng)論 0 1
  • 愛(ài)你沒(méi)有錯(cuò) 你卻在另一時(shí)空 只等待了一天 卻仿佛穿越了一個(gè)世紀(jì) 款款而來(lái) 不是你的白 卻是你的冷 相遇卻似而不見(jiàn) ...
    寧浙閱讀 326評(píng)論 0 0

友情鏈接更多精彩內(nèi)容