Hadoop異常處理

1、執(zhí)行sbin/start-all.sh或sbin/stop-all.sh報錯

ERROR: Attempting to operate on hdfs namenode as root

處理:

在start-dfs.sh,stop-dfs.sh添加:

HDFS_DATANODE_USER=root

HADOOP_SECURE_DN_USER=hdfs

HDFS_NAMENODE_USER=root

HDFS_SECONDARYNAMENODE_USER=root

在start-yarn.sh,stop-yarn.sh添加:

YARN_RESOURCEMANAGER_USER=root

HADOOP_SECURE_DN_USER=yarn

YARN_NODEMANAGER_USER=root


2、執(zhí)行sbin/start-all.sh報錯

Starting namenodes on [hadoop-master-181.pdl] hadoop-master-181: root@hadoop-master-181: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).

處理:

配置SSH

ssh-keygen -t rsa

cat $HOME/.ssh/id_rsa.pub >> $HOME/.ssh/authorized_keys


3、啟動Hadoop配置

etc/hadoop/core-site.xml增加:

<property>

? ? <name>hadoop.tmp.dir</name>

? ? <value>/pdldata/hadoop-3.3.0/data/tmp</value>

</property>

<property>

? ? <name>fs.defaultFS</name>

? ? <value>hdfs://10.0.252.181:8020</value>

</property>

etc/hadoop/hdfs-site.xml增加:

<property>

? ? <name>dfs.replication</name>

? ? <value>1</value>

</property>

<property>

? ? <name>dfs.permissions</name>

? ? <value>false</value>

</property>

<property>

? <name>dfs.http.address</name>

? <value>10.0.252.181:50070</value>

</property>

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

友情鏈接更多精彩內(nèi)容