Hadoop3.2 集群搭建

Hadoop3.2 集群新版本的搭建詳細(xì)講解過程，從下面第一張官方的圖來看，最新版是3.2，所以大豬將使用3.2的版本來演示，過程中遇到的坑留給自己，把路留給你們，IT之路還有大豬。

大豬 為了把文章壓縮極簡方便小伙伴閱讀，將使用root帳號進(jìn)行所有操作。

  1. 準(zhǔn)備兩臺主機10.211.55.11、10.211.55.12

  2. 對應(yīng)的hostname為m1.example.com、m2.example.com
    具體命令操作如下

  3. 主機免密鑰登錄


  1. 同步hosts


  1. 下載 jdk1.8

  2. 配置Java環(huán)境


  3. 環(huán)境變量生效 source /etc/profile

  1. 兩臺主機創(chuàng)建好hadoop的文件夾


  1. 環(huán)境配置 hadoop-3.2.0.tar.gz

  2. 參數(shù)配置

運行用戶操作，添加如下幾句到 /soft/hadoop/etc/hadoop/hadoop-env.sh

  1. 環(huán)境變量生效 source /etc/profile

  2. hadoop 配置文件

core-site.xml 配置


hdfs-site.xml 配置


yarn-site.xml 配置


mapred-site.xml 配置


  1. 格式化name文件夾 hadoop namenode -format

  2. 啟動 start-all.sh
    成功結(jié)果如下

  3. 訪問 http://m1.example.com:8088/cluster

心明眼亮的你、從此刻開始。

最后編輯于 ：
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成，瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點，簡書系信息發(fā)布平臺，僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 一、系統(tǒng)參數(shù)配置優(yōu)化 1、系統(tǒng)內(nèi)核參數(shù)優(yōu)化配置 修改文件/etc/sysctl.conf，添加如下配置，然后執(zhí)行s...
    張偉科閱讀 3,924評論 0贊 14
  • Hadoop HA集群搭建文檔.............................................
    鐘敏_1788閱讀 1,591評論 0贊 0
  • 前言 Hadoop在大數(shù)據(jù)技術(shù)體系中的地位至關(guān)重要，Hadoop是大數(shù)據(jù)技術(shù)的基礎(chǔ)，對Hadoop基礎(chǔ)知識的掌握的...
    piziyang12138閱讀 2,000評論 0贊 3
  • 雖然剛才低頻了，但是感賞自己能夠很快覺察，至少沒有去怪別人，雖然我不喜歡匱乏的人，但這確實是我自己吸引來的，我要...
    貓公主喵閱讀 112評論 0贊 1
  • 利用寶寶玩具游戲能對幼兒進(jìn)行美育教育。豐富多彩的利用寶寶玩具游戲不只是玩，而是對孩子進(jìn)行教育的好形式。例如，...
    辣媽幫6868閱讀 400評論 0贊 0

友情鏈接更多精彩內(nèi)容