本文主要從幾篇論文以及幾篇博客分享談一下現(xiàn)在的剪枝發(fā)展，以及從自己的一些實(shí)踐中實(shí)際剪枝的實(shí)驗(yàn)效果。 參考文章 《Pruning and Quantization for De...
IP屬地：上海
-
-
Smooth L1 Loss1. L1 Loss： 令，忽略求和及系數(shù)，則有，其導(dǎo)數(shù)為隨機(jī)梯度下降法更新權(quán)重為：其中是學(xué)習(xí)率。由此可知，不管預(yù)測值和真實(shí)值的差值大小如何變化，反向傳播時(shí)其梯度不變。除非調(diào)...
-
圖像連通域搜尋skimage和opencv方法關(guān)于連通域的尋找和分割。在python中有兩個(gè)庫的函數(shù)可以使用，一個(gè)是scikit-image庫中的measure文件，另一個(gè)是opencv中的connectedCompon...
-
感受野的計(jì)算和思考前言 很久沒有寫讀書筆記了。最近翻公眾號，發(fā)現(xiàn)一個(gè)以前在我公司實(shí)習(xí)的小朋友的公眾號里面滿滿的工作小結(jié)和閱讀筆記，不禁感慨學(xué)習(xí)如逆水行舟，不進(jìn)則退。 最近讀梁永安教授的《閱讀、...
-
簡單認(rèn)識Adam優(yōu)化器基于隨機(jī)梯度下降（SGD）的優(yōu)化算法在科研和工程的很多領(lǐng)域里都是極其核心的。很多理論或工程問題都可以轉(zhuǎn)化為對目標(biāo)函數(shù)進(jìn)行最小化的數(shù)學(xué)問題。 按吳恩達(dá)老師所說的，梯度下降（Gr...
-
opencv邊緣檢測--Canny1 原理 Canny 邊緣檢測是一種非常流行的邊緣檢測算法，是 John F.Canny 在1986 年提出的。它是一個(gè)有很多步構(gòu)成的算法，我們接下來會逐步介紹。 1.1. ...
-
使用jupyter notebook 打開或新建ipynb發(fā)生500 error
相關(guān)信息：AttributeError: module 'tornado.web' has no attribute 'asynchronous' 說明該環(huán)境tornado為...
