hadoop配置

#??#配置集群:

1.?配置:hadoop-env.sh(修改其中JAVA_HOME)

2.?配置:core-site.xml

<--指定HDFS中NameNode的地址>

<#property>

????<#name>fs.defaultFS

????<#value>hdfs://hadoop101:8020

????主機(jī)名

<#/property>

文件存儲(chǔ)目錄

同上

3.?配置:hafs-site.xml

指定HDFS副本的數(shù)量

同上修改name和value值

#??#啟動(dòng)集群

1.?格式化namenode(第一次啟動(dòng)時(shí)格式化,以后不用總格式化)

(bin目錄中)hdfs namenode -format

2.?啟動(dòng)namenode(sbin目錄中)

sbin/hadoop-daemon.sh start namenode

3.?啟動(dòng)dataname

sbin/hadoop-daemon.sh start datanode

格式化時(shí)出現(xiàn)的錯(cuò)誤,是格式化HDFS獲取的主機(jī)名根本映射不到一個(gè)正確的IP

查看 /etc/sysconfig/network文件中HOSTNAME

與??cat /etc/hosts中ip與主機(jī)號(hào)是否存在對(duì)應(yīng)

x修改成對(duì)應(yīng)相同就可以,也可以自己設(shè)置相同的主機(jī)名

4.?查看hdfs系統(tǒng)web端:本機(jī)ip:50070

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書(shū)系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 一、系統(tǒng)參數(shù)配置優(yōu)化 1、系統(tǒng)內(nèi)核參數(shù)優(yōu)化配置 修改文件/etc/sysctl.conf,添加如下配置,然后執(zhí)行s...
    張偉科閱讀 3,924評(píng)論 0 14
  • 終極算法 關(guān)注微信號(hào)每天收聽(tīng)我們的消息終極算法為您推送精品閱讀 前言 Hadoop 在大數(shù)據(jù)技術(shù)體系中的地位至關(guān)...
    Yespon閱讀 131,125評(píng)論 12 168
  • 作品目錄哪有什么各種癮 “生活中的各種事情帶來(lái)的味道總是相伴而至,有時(shí)這個(gè)味道重點(diǎn),有時(shí)那個(gè)味道重點(diǎn),這樣...
    笑話咖啡館閱讀 591評(píng)論 2 2
  • 楊胖子真實(shí)名字叫楊玉林,今年14歲,下面照片是寫(xiě)這篇文章前照的。 看照片,他哪里是胖子?不過(guò)在11...
    搏擊教練閱讀 1,926評(píng)論 0 1
  • 剛剛突然冒出一個(gè)聲音,今天發(fā)生的一切好像解釋了為什么我不敢跟別人分享?我總是用我不擅長(zhǎng)分享,甚至是我太長(zhǎng)時(shí)間不跟別...
    Hi_張閱讀 144評(píng)論 0 0

友情鏈接更多精彩內(nèi)容