hadoop集群配置

僅以此篇記錄虛擬機(jī)linux安裝hadoop3.3.4的過程,以昨日后學(xué)習(xí)之用
本篇是為了安裝hive,此篇文章介紹安裝hadoop集群配置+jdk配置,本篇文章只會(huì)列出文章大綱,因?yàn)橄嚓P(guān)作者寫的太詳細(xì)了,按著步驟來就行。

一.開始準(zhǔn)備

原文鏈接:https://blog.csdn.net/Python_XTyyds/article/details/128246797

二.Hadoop部署模式

原文鏈接:https://blog.csdn.net/Python_XTyyds/article/details/128248861

三.Hadoop集群配置

原文鏈接:https://blog.csdn.net/Python_XTyyds/article/details/128277601

四.Hadoop集群測試

原文鏈接:https://blog.csdn.net/Python_XTyyds/article/details/128277628

文章主要的指令如下:

  • 將master虛擬機(jī)上的hadoop發(fā)送到slave1虛擬機(jī)上
scp -r $HADOOP_HOME root@slave1:$HADOOP_HOME

個(gè)人百度云下載鏈接地址:

mysql-5.7.27
鏈接:https://pan.baidu.com/s/1AIhTd-ppwYKWR0LB37Z1zQ 提取碼:x6SX 

hadoop-3.3.4
鏈接:https://pan.baidu.com/s/1aGZ9SmmJcEoerxeDt5KvaQ 提取碼:11x6 

jdk-8u231
鏈接:https://pan.baidu.com/s/1H7WzccdJf-fcMUj-2Fxr-A 提取碼:66c5 

mysql-connection8.0.32
鏈接:https://pan.baidu.com/s/14g7JxOONtYWvnVgcbGbz3A 提取碼:bLrs 

zookeepeer3.4.10
鏈接:https://pan.baidu.com/s/1eR0Lm_LezJsq9RmDl354YQ 提取碼:B46G 

有坑:后續(xù)hive啟動(dòng)hiveserver2缺少配置需要加上

#core-site.xml添加
    <property>
        <name>hadoop.proxyuser.root.hosts</name>
        <value>*</value>
    </property>
    <property>
        <name>hadoop.proxyuser.root.groups</name>
        <value>*</value>
    </property>
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容