前言 寫Optimizer系列文章,是因?yàn)槿ツ?017年在華為做深度學(xué)習(xí)相關(guān)工作時(shí),學(xué)習(xí)實(shí)現(xiàn)了許多基于tensorflow的optimizer的...
前言 AutoML是指盡量不通過(guò)人來(lái)設(shè)定超參數(shù),而是使用某種學(xué)習(xí)機(jī)制,來(lái)調(diào)節(jié)這些超參數(shù)。這些學(xué)習(xí)機(jī)制包括傳統(tǒng)的貝葉斯優(yōu)化,多臂老虎機(jī)(multi...
RNN RNN,循環(huán)神經(jīng)網(wǎng)絡(luò),是一種專門處理序列數(shù)據(jù)的神經(jīng)網(wǎng)絡(luò),其基本結(jié)構(gòu)如圖所示: RNN的輸入是序列數(shù)據(jù)x與上輪計(jì)算輸出的隱藏狀態(tài)。假設(shè)RN...
Ensemble learning involves combining multiple machine learning technique...
This is my learning experience when I read the paper Multi-class AdaBoos...
安裝所需環(huán)境 安裝cuda 安裝python 安裝cudnn從這里下所需安裝程序。 在.bashrc加入: 在~/.theanorc加入: 測(cè)試:
稀疏矩陣 稀疏矩陣(sparse matrix)是由于矩陣中存在大量0,從而可以采用特別的存儲(chǔ)技巧來(lái)壓縮內(nèi)存。由于在工作需要將一個(gè)1506665...
Neural Networks and Deep Learning This is my notebook when I learn deep ...
回顧了下PCA的步驟,并用python實(shí)現(xiàn)。深刻的發(fā)現(xiàn)當(dāng)年學(xué)的特征值、特征向量好強(qiáng)大。 Introduction to PCA PCA是一種無(wú)監(jiān)...