在一些算法中,我們需要給θ初始化,例如梯度下降算法。

在一些算法中,不能初始化參數(shù)為全零,例如神經(jīng)網(wǎng)絡(luò)。
在神經(jīng)網(wǎng)絡(luò)中,如果初始化所有的參數(shù)(也就是權(quán)重)相同,那么所有輸入都相同,神經(jīng)網(wǎng)絡(luò)就失去了它的作用了。
所以我們需要隨機(jī)初始化。

Octave中:

為了訓(xùn)練神經(jīng)網(wǎng)絡(luò),我們需要對權(quán)重進(jìn)行隨機(jī)初始化。