加載模型報錯匯總

  • 報錯: ModelArgs.__init__() missing 1 required positional argument: 'rope_theta'

  • 解決: 將config.json文件中rope_theta復(fù)制為一級字段

  • 報錯: Model type qwen3_5_moe_text not supported.

  • 解決: 將config.json文件中model_type改為qwen3_5_moe

  • 報錯: Model type deepseek_v4 not supported.

  • 解決: mlx官方尚未完全適配, 只能用實驗版測試

pip uninstall mlx_lm
git clone -b feat/deepseek-v4 https://github.com/machiabeli/mlx-lm-1.git
cd mlx-lm-1
python3 setup.py install
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容