模型特征調(diào)優(yōu)中的 Scoring 選擇

在模型通過(guò) GridSearchCV 進(jìn)行特征調(diào)優(yōu)的過(guò)程中,scoring 參數(shù)的選擇十分重要。通常模型用的最多的還是 F1 和 ROC-AUC,但是在多分類下,選擇 roc_auc 或者 f1 作為分類器的 scoring 標(biāo)準(zhǔn)就會(huì)報(bào)錯(cuò),而需要使用 f1_weighted 比較合適。

scikit-learn文檔解釋:http://scikit-learn.org/stable/modules/generated/sklearn.metrics.precision_recall_fscore_support.html

average 部分的官方文檔

所以現(xiàn)在實(shí)驗(yàn)的結(jié)果是:

(1)二分類評(píng)判指標(biāo):f1,roc_auc

(2)多分類評(píng)判指標(biāo):f1_weighted

另外通過(guò)程序測(cè)試可知,全部的候選選項(xiàng)有:

Valid options are ['accuracy', 'adjusted_mutual_info_score', 'adjusted_rand_score', 'average_precision', 'completeness_score', 'explained_variance', 'f1', 'f1_macro', 'f1_micro', 'f1_samples', 'f1_weighted', 'fowlkes_mallows_score', 'homogeneity_score', 'mutual_info_score', 'neg_log_loss', 'neg_mean_absolute_error', 'neg_mean_squared_error', 'neg_mean_squared_log_error', 'neg_median_absolute_error', 'normalized_mutual_info_score', 'precision', 'precision_macro', 'precision_micro', 'precision_samples', 'precision_weighted', 'r2', 'recall', 'recall_macro', 'recall_micro', 'recall_samples', 'recall_weighted', 'roc_auc', 'v_measure_score']

最后附注一篇系統(tǒng)講述 "機(jī)器學(xué)習(xí)評(píng)價(jià)指標(biāo)" 的文章,便于日后總結(jié):http://www.36dsj.com/archives/42271

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 春雨驚春清谷天,夏滿芒夏暑相連。 秋處露秋寒霜降,冬雪雪冬小大寒。
    AwardAward閱讀 364評(píng)論 0 2
  • 【理論】 一個(gè)人的成功15%靠能力,85%靠人際關(guān)系。上一講談到,哈佛大學(xué)用76年的時(shí)間追蹤,發(fā)現(xiàn)了人生贏家的十項(xiàng)...
    效能藝術(shù)生活家婉婉閱讀 988評(píng)論 0 0
  • 陰霾終于結(jié)束,碧空如洗,樹木變綠。 南方迎來(lái)鮮花的五月,我們擁抱盎然的春意。 有三三兩兩林間采野菜的人,人們對(duì)大自...
    青柳青青閱讀 50評(píng)論 0 1

友情鏈接更多精彩內(nèi)容