使用集群運行你的python代碼

集群中有四臺主機,master(無GPU),node01,node02,node03(GPU主機),直接運行python main.py程序將在CPU中運行。

如下步驟可以運行你的程序:

在你的文件目錄下新建一個 lsf.sh 文件,正文寫入:


#!/bin/sh                   

#BSUB -q normal       

#BSUB -o %J.out

#BSUB -e %J.err

#BSUB -n 1 

#BSUB -J JOBNAME

#BSUB  -R span[ptile=1]   

#BSUB -m "node03"         

#BSUB  -gpu  num=1         


python main.py 

其中 python main.py 是你運行程序的命令,然后:

source activate 你的conda環(huán)境

開啟環(huán)境,用

bsub <lsf.sh向集群提交運算任務。

即可運行程序,終端會給你一個任務序號,輸出文件就是序號.out序號.err。

** 其他命令:**

bjobs -W查看你的任務運行狀況

bhosts -gpu查看集群GPU使用情況。

?著作權歸作者所有,轉載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容