江蘇氣象AI算法挑戰(zhàn)賽亞軍比賽攻略_DontMind隊

關聯(lián)比賽:??2022江蘇氣象AI算法挑戰(zhàn)賽-AI助力強對流天氣預報

2022江蘇氣象AI算法挑戰(zhàn)賽亞軍比賽攻略_DontMind隊

成員介紹

一、賽題分析

本次比賽主要是針對大風/雷達回波/降水的短臨預報,屬于典型的時空序列預測問題,此類問題可以從分類和回歸預測兩個角度來解決。

按照各氣象要素閾值區(qū)間進行分類,可以轉化為分類預測問題;

從回歸預測的角度又分為單變量回歸預測和多變量回歸預測。

由于大風和降水預測很難轉換為分類預測問題,而且我們經(jīng)過大量的模型試驗表明,多變量回歸預測很難同時達到最優(yōu),且很難超越單變量回歸預測。因此,我們最終采用了單變量回歸預測思路,并利用過去一小時數(shù)據(jù)預測未來兩小時各氣象要素的時空演變。以下將圍繞我們決賽最終采用的模型和策略進行介紹

二、總體設計思路

三、數(shù)據(jù)預處理

數(shù)據(jù)清洗:去除雷達回波低值偽影以及異常降水值。樣本重采樣和降采樣:由于數(shù)據(jù)分布不平衡問題,根據(jù)各要素閾值區(qū)間分布情況對樣本進行重采樣和降采樣,以平衡不同強度樣本占比。數(shù)據(jù)集調整:由于所給的數(shù)據(jù)集中相鄰個例僅相差一幀,重復率過高,因此我們將臨近個例的間隔調整為5幀,降低樣本重疊率,提升模型訓練穩(wěn)定性。

四、模型選擇與優(yōu)化

風速預測——SEResNet

雷達回波預測模型——TrajGRU

降水預測模型:雙模型融合

模型一:U2Net

模型二:PhyDNet

雙模型融合:兩個模型預測結果取平均

五、損失函數(shù)

針對不同模型,設計不同損失函數(shù),由于本賽題預測對象均有嚴重不平衡問題,因此針對MSE和MAE類型損失函數(shù)需要給與相應權重設置。而DiceLoss本身僅針對目標區(qū)域計算損失,因此無需再給定權重。此外,針對降水,加入了60/90/120min的累計降水的損失作為正則項。

六、性能提升策略

Two-stage優(yōu)化:凍結模型部分層,調整損失函數(shù)權重,調低學習率,進行模型參數(shù)微調,提高強回波/降水的預測技能評分

模型集成:針對降水預測,融合U2Net與PhyDNet預測,提升模型泛化能力和穩(wěn)定性

偏差訂正:考慮了預測能力的時間衰減和閾值的影響,對模型預測進行偏差訂正,提高強回波/降水的預測技能評分

七、官方個例真實性

風速預測

雷達回波

降水預測





八、總結

樣本不平衡:樣本重采樣+損失加權和正則/類別不平衡損失+Two-stage優(yōu)化減輕類別極度不平衡導致的強回波/降水難預測問題

模型性能及穩(wěn)定性:多模型集成進一步提高降水的整體預報技能評分及模型的穩(wěn)定性

后處理方法:引入模型預測偏差訂正后處理方法提高強回波/降水預報技能評分


本次比賽我們初賽和復賽均為第二,其中復賽實時評測階段22天大部分時段取得前6成績,其中10天取得第1,模型總體表現(xiàn)較為穩(wěn)定

?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
【社區(qū)內容提示】社區(qū)部分內容疑似由AI輔助生成,瀏覽時請結合常識與多方信息審慎甄別。
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發(fā)布,文章內容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關閱讀更多精彩內容

  • 發(fā)展趨勢:以地理空間大數(shù)據(jù)為基礎,利用人工智能技術對遙感數(shù)據(jù)智能分析與解譯成為未來發(fā)展趨勢。研究方向及領域:1、遙...
    華葉6018閱讀 298評論 0 1
  • 機器學習是做NLP和計算機視覺這類應用算法的基礎,雖然現(xiàn)在深度學習模型大行其道,但是懂一些傳統(tǒng)算法的原理和它們之間...
    在河之簡閱讀 20,938評論 4 65
  • 邏輯回歸算法梳理 1、 邏輯回歸的原理 邏輯回歸就是這樣的一個過程:面對一個回歸或者分類問題,建立代價函數(shù),然后通...
    敬標閱讀 2,826評論 0 1
  • 機器學習是做NLP和計算機視覺這類應用算法的基礎,雖然現(xiàn)在深度學習模型大行其道,但是懂一些傳統(tǒng)算法的原理和它們之間...
    城市中迷途小書童閱讀 1,205評論 0 11
  • 這個題目取得比較奇怪,原因是:雖然號稱數(shù)學是世界上最簡潔的語言,但是太多的公式難免看的人心慌;其次公式在hexo+...
    Helen_Cat閱讀 2,757評論 0 13

友情鏈接更多精彩內容