發(fā)簡(jiǎn)信
IP屬地：天津
-
梯度下降與反向傳播
鏈?zhǔn)椒▌t 梯度下降與反向傳播（含過(guò)程推導(dǎo)及證明）
-
Loss function
常見(jiàn)的損失函數(shù) 通常機(jī)器學(xué)習(xí)每一個(gè)算法中都會(huì)有一個(gè)目標(biāo)函數(shù)，算法的求解過(guò)程是通過(guò)對(duì)這個(gè)目標(biāo)函數(shù)優(yōu)化的過(guò)程。在分類(lèi)或者回歸問(wèn)題中，通常使用損失函數(shù)...
-
-
ReLU
1 修正線性單元（ReLU） 從上圖可以看到，ReLU 是從底部開(kāi)始半修正的一種函數(shù)。數(shù)學(xué)公式為： 當(dāng)輸入 x<0 時(shí)，輸出為 0，當(dāng) x> 0...
-
Tanh
Tanh 激活函數(shù)又叫作雙曲正切激活函數(shù)（hyperbolic tangent activation function）。與 Sigmoid 函...
-
Sigmoid
又叫作 Logistic 激活函數(shù)，它將實(shí)數(shù)值壓縮進(jìn) 0 到 1 的區(qū)間內(nèi)，還可以在預(yù)測(cè)概率的輸出層中使用。該函數(shù)將大的負(fù)數(shù)轉(zhuǎn)換成 0，將大的正...
-
ave pooling根據(jù)相關(guān)理論，特征提取的誤差主要來(lái)自兩個(gè)方面：（1）鄰域大小受限造成的估計(jì)值方差增大；（2）卷積層參數(shù)誤差造成估計(jì)均值的偏移。一般來(lái)說(shuō)，mean...
-
CNN基本算子與操作
卷積神經(jīng)網(wǎng)絡(luò)（Convolutional Neural Networks，CNN）是一種前饋神經(jīng)網(wǎng)絡(luò)。卷積神經(jīng)網(wǎng)絡(luò)是受生物學(xué)上感受野（Recep...