前言
開始學(xué)習(xí)Hadoop了，在慕課網(wǎng)上跟著視頻安裝Hadoop的時候遇到不少麻煩。寫這篇文章主要是為了幫助自己記錄。下面開始言歸正傳。
安裝JDK
如果你看過其他教程，你會發(fā)現(xiàn)他們的第一步應(yīng)該是先添加新用戶Hadoop到Hadoop用戶組，再使Hadoop用戶擁有和root用戶一樣的權(quán)限。我也這么嘗試過，但也許是我配置的不對，最終還是要切換到root用戶進行操作。所以我就把添加用戶這一步省略了，我后面所有的操作都是在root用戶下進行的。所以我的教程是有風(fēng)險的，請謹慎使用。
-
切換到root用戶
ubuntu@VM-231-104-ubuntu:~$ su root
輸入密碼之后就切換到root用戶了。如果出現(xiàn)
su : Authentication failure
請自行百度，不再贅述。
javac
apt install openjdk-8-jdk-headless
記住JDK的安裝路徑
vim /etc/profile
配置信息如下：
export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64
export JRE_HOME=$JAVA_HOME/jre
export HADOOP_HOME=/opt/hadoop-1.2.1
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$PATH
這里包含后面要配置的hadoop的環(huán)境變量。
下載hadoop 1.2.1的壓縮包并拷貝至/opt目錄下
hadoop-1.2.1
tar -zxvf hadoop-1.2.1.tar.gzcd hadoop-1.2.1/confvim hadoop-env.sh
export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64
vim core-site.xml
<property>
<name>hadoop.tmp.dir</name>
<value>/hadoop</value>
</property>
<property>
<name>dfs.name.dir</name>
<value>/hadoop/name</value>
</property>
<property>
<name>fs.default.name</name>
<value>hdfs://VM-231-104-ubuntu:9000</value>
</property>
其中，VM-231-104-ubuntu是我的主機名。
vim hdfs-site.xml
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>
vim mapred-site.xml
<property>
<name>mapred.job.tracker</name>
<value>VM-231-104-ubuntu:9001</value>
</property>
source /etc/profile
hadooop
hadoop namenode -format
這條命令不需要每次都執(zhí)行。
cd ../bin
start-all.sh
jps
配置免密鑰登錄
cd
ssh-keygen –t rsa
三次回車
cd /root/.ssh
cp id_rsa.pub authorized_keys
總結(jié)
第一次寫教程（日志/博客），寫的很爛，多多見諒。以前看別人的教程時總會覺得寫的不詳細，自己寫才發(fā)現(xiàn)寫詳細真的很費勁。
