Hadoop二:Hadoop shell命令

1. Hadoop HDFS文件目錄

總目錄:就是core-site.xml中配置的hadoop.tmp.dir目錄,我配的是:/kluter/hdpTmpDir

文件data目錄:/kluter/hdpTmpDir/dfs/data/current/BP-17034281-10.10.77.194-1528264430557/current/finalized/subdir0/subdir0


2. 文件上傳

hadoop的網(wǎng)頁界面:http://10.10.77.194:50070中的文件查看工具界面,只能查看、下載文件,而不能上傳文件,所以要使用hadoop命令才能上傳

命令行:#hadoop fs -put test.txt /

ps:文件超過128MB,hdfs會切分存放,因?yàn)榕渲梦募心J(rèn)blocksize是128MB,可以在hdfs-site.xml中配置dfs.blocksize參數(shù)中修改


3. 查看文件目錄中的文件

3.1 網(wǎng)頁界面查看

查看上傳成功的文件


3.2 命令行查看

#hadoop fs -ls /

命令行查看


3.3 查看內(nèi)容

#hadoop fs -cat /test.txt


3.4 下載HDFS中的文件

#hadoop fs -ls /

#hadoop fs -get /test.txt

轉(zhuǎn)hadoop常用命令及參數(shù)介紹:https://blog.csdn.net/wangxizhen123/article/details/73359157

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容