僅以此篇記錄虛擬機(jī)linux安裝hadoop3.3.4的過程,以昨日后學(xué)習(xí)之用
本篇是為了安裝hive,此篇文章介紹安裝hadoop集群配置+jdk配置,本篇文章只會(huì)列出文章大綱,因?yàn)橄嚓P(guān)作者寫的太詳細(xì)了,按著步驟來就行。
一.開始準(zhǔn)備
原文鏈接:https://blog.csdn.net/Python_XTyyds/article/details/128246797
二.Hadoop部署模式
原文鏈接:https://blog.csdn.net/Python_XTyyds/article/details/128248861
三.Hadoop集群配置
原文鏈接:https://blog.csdn.net/Python_XTyyds/article/details/128277601
四.Hadoop集群測試
原文鏈接:https://blog.csdn.net/Python_XTyyds/article/details/128277628
文章主要的指令如下:
- 將master虛擬機(jī)上的hadoop發(fā)送到slave1虛擬機(jī)上
scp -r $HADOOP_HOME root@slave1:$HADOOP_HOME
個(gè)人百度云下載鏈接地址:
mysql-5.7.27
鏈接:https://pan.baidu.com/s/1AIhTd-ppwYKWR0LB37Z1zQ 提取碼:x6SX
hadoop-3.3.4
鏈接:https://pan.baidu.com/s/1aGZ9SmmJcEoerxeDt5KvaQ 提取碼:11x6
jdk-8u231
鏈接:https://pan.baidu.com/s/1H7WzccdJf-fcMUj-2Fxr-A 提取碼:66c5
mysql-connection8.0.32
鏈接:https://pan.baidu.com/s/14g7JxOONtYWvnVgcbGbz3A 提取碼:bLrs
zookeepeer3.4.10
鏈接:https://pan.baidu.com/s/1eR0Lm_LezJsq9RmDl354YQ 提取碼:B46G
有坑:后續(xù)hive啟動(dòng)hiveserver2缺少配置需要加上
#core-site.xml添加
<property>
<name>hadoop.proxyuser.root.hosts</name>
<value>*</value>
</property>
<property>
<name>hadoop.proxyuser.root.groups</name>
<value>*</value>
</property>