1、深度學(xué)習(xí)發(fā)展史
- 大致經(jīng)歷兩次浪潮：淺層學(xué)習(xí)，深度學(xué)習(xí)
- Geoffrey Hinton 神經(jīng)網(wǎng)絡(luò)之父
- AlexNet 2012年在ILSVRC比賽中脫穎而出，進(jìn)入深度學(xué)習(xí)爆發(fā)階段
[1] 深度學(xué)習(xí)的昨天今天和明天
https://wk.baidu.com/view/a65b6d5ffd4ffe4733687e21af45b307e871f920
[2] 深度學(xué)習(xí)技術(shù)綜述
https://m.doc88.com/p-9905015544172.html
2、基礎(chǔ)概念
- 激活函數(shù)（sigmoid，tanh，relu）
- 卷積運算
- 池化（步幅，卷積核，卷積特征面）
- 全連接
- dropout
- softmax
[1]空間魔法師的概念 www. zhihu. com/question/22334626
[2] 《卷積神經(jīng)網(wǎng)絡(luò)從入門到精通》第四章
[3] 《深度學(xué)習(xí)：基于python的理論與實現(xiàn)》第二章
3、AlexNet
是深度學(xué)習(xí)的突破性成果
每層在做什么，參數(shù)數(shù)量變化，GPU的使用，relu的使用，keras實現(xiàn)
4、深度學(xué)習(xí)框架
2012百花齊放
2018 tensorflow 老大哥
當(dāng)今 ML框架之爭：pytorch tensorflow
