機(jī)器學(xué)習(xí)評價標(biāo)準(zhǔn)(不包括聚類和信息檢索)

擬合

1.平均絕對誤差MAE(Mean Absolute Error)

又被稱為l1范數(shù)損失(l1-norm loss):

MAE(y,\hat{y} )=\frac{1}{n}\sum_{i=1}^n\vert y_{i}-\hat{y_{i} }   \vert

2.平均平方誤差MSE(Mean Squared Error)

又被稱為l2范數(shù)損失(l2-norm loss):

MSE(y,\hat{y} )=\frac{1}{n}\sum_{i=1}^n(y_{i}-\hat{y_{i} })^2

分類

混淆矩陣:

準(zhǔn)確率(accuracy)

Accuracy=\frac{TP+TN}{TP+TN+FP+FN}

正負(fù)樣本不平衡的情況下,準(zhǔn)確率這個評價指標(biāo)有很大的缺陷。比如在互聯(lián)網(wǎng)廣告里面,點(diǎn)擊的數(shù)量是很少的,一般只有千分之幾,如果用Accuracy,即使全部預(yù)測成負(fù)類(不點(diǎn)擊)Accuracy也有 99% 以上,沒有意義。

精確率(precision)

precision=\frac{TP}{TP+FP} .也叫查準(zhǔn)率

召回率(recall)

recall=\frac{TP}{FN+TP} .也叫查全率

有時候需要在精確率與召回率之間權(quán)衡,一種選擇是畫出精確率-召回率曲線(Precision-Recall Curve),曲線下的面積被稱為AP分?jǐn)?shù)(Average precision score);另外一種選擇就是計算F_{\beta } 分?jǐn)?shù),它是精確率與召回率的加權(quán)求和。

F值,F(xiàn)-measure

ROC曲線,橫坐標(biāo)FPR,縱坐標(biāo)TPR,曲線面積為AUC(Area Under Curve)

FPR=\frac{FP}{N} TPR=\frac{TP}{P}

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容