大家好，我是Iggi。

今天我給大家分享的是如何在Mac系統(tǒng)上配置Hadoop-3.1.1版本的開發(fā)環(huán)境。

1.展示基礎(chǔ)環(huán)境截圖。

IDE版本

操作系統(tǒng)版本

Hadoop 生態(tài)圈中各個組件版本

2.下載Hadoop-3.1.1版本的發(fā)布文件。

網(wǎng)絡(luò)鏈接如下：https://www-eu.apache.org/dist/hadoop/common/hadoop-3.1.1/

下載文件

下載到本地后解壓備用,我的解壓目錄是：/Users/Iggi/Documents/hadoop-3.1.1

解壓后的目錄

3.配置環(huán)境變量

打開終端輸入：vi? ?~/.bash_profile?

倒數(shù)第2行追加：export HADOOP_HOME=/Users/Iggi/Documents/hadoop-3.1.1

最后一行修改成這樣：export PATH=$JAVA_HOME/bin:$M2_PATH/bin:$HADOOP_HOME/bin:$PATH

編輯完畢后繼續(xù)在終端輸入：source? ?~/.bash_profile

完成環(huán)境變量的更新。

4.配置Hadoop 插件。

下載地址：https://github.com/winghc/hadoop2x-eclipse-plugin

解壓后在release目錄中復制以下文件到IDE的plugins文件夾內(nèi)。

復制插件

然后打開IDE配置Hadoop-3.1.1的安裝路徑，如下圖操作。

第一步操作，

第二步操作

然后點擊如圖下所示：

第三步操作

然后選擇如圖下所示：

第四步

點擊Open后生成藍色小象。

5.添加集群配置點擊藍色小象，如圖操作。

點擊藍色小象

配置集群參數(shù)，如下圖所示。

配置MapReduce與HDFS

MapReduce參考Advanced mapred-site配置中

MapReduce配置

DFS參考Advanced core-site配置中

DFS配置

6.驗證配置

最終效果

至此，在Mac系統(tǒng)下配置Hadoop-3.1.1完畢。