回歸算法——線性回歸

線性回歸是我們接觸得最早的一種回歸,只是當(dāng)時(shí)他的名字不叫線性回歸,當(dāng)時(shí)可能說的是線性擬合。
Y=aX+b+e
沒有看錯(cuò),就是這貨,一元線性回歸。
這里Y是連續(xù)變量,a和b是參數(shù),e是誤差,X是自變量。
求解參數(shù)我們需要求得最小的e,這里我們采用的是最小化平方和誤差,(y實(shí)際值-y估計(jì)值)^2。
多元線性回歸如字面上的意思,有多個(gè)自變量(至少2個(gè)自變量)。
標(biāo)準(zhǔn)線性回歸公式:


敲黑板,劃重點(diǎn)

線性回歸123:

  1. 自變量和因變量之間要有線性關(guān)系才能用線性回歸
  2. 線性回歸對異常值非常敏感,分析之前可以用箱線圖看看或用其他途徑剔除異常值。
  3. 多元線性回歸存在多重共線性、自相關(guān)性和異方差性
  4. 多重共線性會(huì)增加系數(shù)估計(jì)值的方差,導(dǎo)致系數(shù)估計(jì)值不穩(wěn)定
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容