域?qū)咕W(wǎng)絡(Domain-Adversarial Neural Networks)

通過對抗的方式可以提取domian無關的特征,從而實現(xiàn)domain adaption。這就是DANN(Domain-Adversarial Neural Networks)。

原理

分為三部分,分別是:特征提取器(feature extractor)、標簽分類器(label predictor)、域判別器(domain classifier)。


DANN

其中域分類器和特征提取器中間有一個梯度反轉(zhuǎn)層(Gradient reversal layer)。梯度反轉(zhuǎn)層顧名思義將梯度乘一個負數(shù),然后進行反向傳播。

所以特征提取器和域判別器在進行對抗,特征提取器的目標是最大化標簽分類的精確度,最小化域分類器的精確度。而域分類器的目標是最大化域分類的精確度,所以特征提取器和域判別器在進行對抗。最后特征提取器獲得的是域無關的信息。

引用

域?qū)梗ㄓ蜻m應)訓練
Domain Adaptation_小結(jié)
DANN與梯度反轉(zhuǎn)層(GRL)詳解
Domain-Adversarial Training of Neural Networks

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容