[FM]從線性回歸到FM模型

一.線性回歸

線性回歸是萬(wàn)物之源,其基本思想貫穿了很多算法的推導(dǎo)中。

線性回歸的模型是:

\hat{y} (x)=\sum_{i=1}^n w_{i}x_{i}   +\xi _{i} ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ??(1)

其中,\xi _{i} 表示誤差。根據(jù)中心極限定理,誤差服從正態(tài)分布,其概率分布為:

http://www.itdecent.cn/p/6c9af5a1386b

用梯度下降法,更新的函數(shù)為:


參考博客:

http://www.itdecent.cn/p/6c9af5a1386b

二.FM

https://blog.csdn.net/u013749251/article/details/80906213

1.當(dāng)x為0時(shí),偏倒數(shù)為0,梯度無(wú)法更新,即無(wú)法求出參數(shù)值。

2.若P為滿秩矩陣,則P可分解為 P=AB的形式。(線性代數(shù))

http://www.itdecent.cn/p/152ae633fb00


三FM模型代碼

http://www.itdecent.cn/p/556997127319"

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書(shū)系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容