決策樹是機(jī)器學(xué)習(xí)中應(yīng)用很廣泛的算法,它不僅可以處理分類和回歸問題,還可以產(chǎn)出特征重要性、連續(xù)變量分箱等副產(chǎn)物。決策樹有著可解釋性強(qiáng)、原理簡單、效...
服從多項(xiàng)式分布的隨機(jī)向量 滿足如下條件: 1),且; 2)設(shè) 為任意非負(fù)整數(shù),且 ; 事件 發(fā)生的概率為: 其中,,。 【舉例】一個(gè)6面的...
在上一篇文章中,我們介紹了如何用梯度下降法進(jìn)行神經(jīng)網(wǎng)絡(luò)的訓(xùn)練與優(yōu)化?,F(xiàn)在我們用一個(gè)實(shí)際的數(shù)據(jù)集:FashionMNIST,完整的實(shí)現(xiàn)構(gòu)建神經(jīng)網(wǎng)絡(luò)...
在前面的文章中,我們介紹了為線性回歸、二分類、三分類神經(jīng)網(wǎng)絡(luò)的優(yōu)化選取適當(dāng)?shù)膿p失函數(shù)。我們知道,當(dāng)損失函數(shù)的值越小,代表神經(jīng)網(wǎng)絡(luò)預(yù)測值與真實(shí)值之...
在前面的文章中,我們介紹了單層和多層神經(jīng)網(wǎng)絡(luò)的正向傳播過程,同時(shí)也使用了torch.nn來實(shí)現(xiàn)這一過程。不難發(fā)現(xiàn),模型中的權(quán)重對模型輸出的預(yù)測結(jié)...
本文將通過一個(gè)例子,使用torch.nn中Module類的繼承來完整實(shí)現(xiàn)一個(gè)多層神經(jīng)網(wǎng)絡(luò)的正向傳播過程。此外,文中將介紹類繼承過程中定義init...
本文主要以異或門問題為例子,介紹多層神經(jīng)網(wǎng)絡(luò)。我們將從上一篇文章中介紹的單層神經(jīng)網(wǎng)絡(luò)出發(fā),學(xué)習(xí)或門、非與門、異或門問題,了解單層神經(jīng)網(wǎng)絡(luò)在面對非...
本文將從一個(gè)簡單的線性回歸問題出發(fā),構(gòu)建單層神經(jīng)網(wǎng)絡(luò),并手動實(shí)現(xiàn)它的正向傳播。同時(shí),我們將介紹如何使用PyTorch中的核心模塊torch.nn...
最小二乘法可以用來求解線性回歸模型中權(quán)重參數(shù)的最優(yōu)解,本文將對這一求解過程做簡要概述。 線性回歸模型 對于第 個(gè)樣本 (),我們有:其中,為樣...