集群wget NCBI文件夾下批量文件問(wèn)題 2020-04-28

在集群ssh software-install從ncbi下載基因組數(shù)據(jù),用的wget --recursive --no-host-directories --cut-dirs=6 ftp://ftp.* -P ./下載到70%顯示網(wǎng)絡(luò)中斷了,已經(jīng)登出了,4月28號(hào)看還有文件夾在生成

圖1.png

ps ux | more
killall
圖2.png

killall 之后,到4月29號(hào)
圖3.png


求助系統(tǒng)管理后發(fā)現(xiàn)這是個(gè)大烏龍,以下是解決方法

圖4.png
  • 原因:
    1. 找錯(cuò)了登錄節(jié)點(diǎn),此時(shí)登錄節(jié)點(diǎn)應(yīng)該是安裝軟件用的節(jié)點(diǎn)ssh software-install
    2. 證明wget已經(jīng)支持?jǐn)帱c(diǎn)續(xù)傳了
  • 解決辦法:
    1. 回到安裝登錄節(jié)點(diǎn)
      $ ssh software-install 
      Last login: Tue Apr 28 15:53:21 2020 from 10.54.25.20
      
    2. 查看此節(jié)點(diǎn)所有wget的任務(wù),在該節(jié)點(diǎn)用ps ux | more也可以查看
      $ ps -ef |grep wget
      thisisme 7906     1  0 Apr26 ?        00:38:54 wget --recursive --no-host-directories --cut-dirs=6 ftp://ftp.ncbi.nlm.nih.gov/genomes/all/GCA/010/614/865/GCA_010614865.1_ASM1061486v1 -P ./
      thisisme 19417 19204  0 13:51 pts/16   00:00:00 grep wget
      34582    29133 31112  1 11:43 pts/45   00:01:45 wget ftp://ftp.sra.ebi.ac.uk/vol1/fastq/ERR375/ERR375744/ERR375744_2.fastq.gz
      70122    32614     1  0 Apr17 ?        01:37:53 wget -m -c ftp://dbnsfp:dbnsfp@dbnsfp.softgenetics.com/dbMTS1.0
      
    3. kill 7906完美解決

總結(jié)

建議加強(qiáng)下linux基礎(chǔ)知識(shí),注意問(wèn)題產(chǎn)生的前后聯(lián)系,多多理解節(jié)點(diǎn)概念

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀(guān)點(diǎn),簡(jiǎn)書(shū)系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容