Hbase2.1 集群搭建

Hbase 在大數(shù)據(jù)的體系中扮演著DB角色,不得不說(shuō)是重要的一員,在上一篇,大豬 已經(jīng)給大家演示了 Hadoop 3.2 集群搭建 了,本次我們將繼續(xù)緊接著搭建Hbase集群。

由于我們安裝是Hbase的集群版本,這里將會(huì)使用到獨(dú)立的 Zookeeper。

Zookeeper 與 Hbase 使用的版本也將都是最新版本,坑嘛,自然由大豬來(lái)趟。

服務(wù)器一

下載 zookeeper-3.4.14.tar.gz

curl -O http://apache.mirrors.ionfish.org/zookeeper/stable/zookeeper-3.4.14.tar.gz

解壓更名

tar -zxvf zookeeper-3.4.14.tar.gz
mv zookeeper-3.4.14 zookeeper

配置PATH環(huán)境

echo -e 'export ZK_HOME=/soft/zookeeper \nexport PATH=$PATH:$ZK_HOME/bin' >> /etc/profile
# 立即生效
source /etc/profile

coo.cfg 配置

tickTime=2000
initLimit=10
syncLimit=5
dataDir=/soft/zookeeper/data
dataLogDir=/soft/zookeeper/logs
clientPort=2181
server.1=m1.example.com:2888:3888
server.2=m2.example.com:2888:3888

創(chuàng)建目錄

mkdir -p /soft/zookeeper/data
mkdir -p /soft/zookeeper/logs

配置zk的日志輸出路徑

# 在第二行添加下面語(yǔ)句到 bin/zkServer.sh 中
export ZOO_LOG_DIR=/soft/zookeeper/logs

創(chuàng)建zk id標(biāo)識(shí)

echo 1 > /soft/zookeeper/data/myid

服務(wù)器二

復(fù)制zookeeper到服務(wù)器二soft目錄上

scp -r zookeeper root@m2.example.com:/soft

創(chuàng)建zk id標(biāo)識(shí)

echo 2 > /soft/zookeeper/data/myid

創(chuàng)建目錄 => 同上
配置PATH環(huán)境 => 同上

ZK啟動(dòng)

# 服務(wù)器一
zkServer.sh start
# 服務(wù)器二
zkServer.sh start

# 成功如下
[root@m1 data]# zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /soft/zookeeper/bin/../conf/zoo.cfg
Mode: follower 或 leader

Hbase操作

下載 hbase-2.1.4-bin.tar.gz

curl -O https://www.apache.org/dyn/closer.lua/hbase/2.1.4/hbase-2.1.4-bin.tar.gz

解壓更名

tar -zxvf hbase-2.1.4-bin.tar.gz
mv hbase-2.1.4 hbase

配置PATH環(huán)境

echo -e 'export export HBASE_HOME=/soft/hbase \nexport PATH=$PATH:$HBASE_HOME/bin' >> /etc/profile
# 立即生效
source /etc/profile

hbase-site.xml 配置

    <property>
        <name>hbase.rootdir</name>
        <value>hdfs://m1.example.com:9000/hbase</value>
    </property>
    <property>
        <name>hbase.unsafe.stream.capability.enforce</name>
        <value>false</value>
    </property>
    <property>
         <name>hbase.master</name>
         <value>16010</value>
    </property>
    <property>
        <name>hbase.cluster.distributed</name>
        <value>true</value>
    </property>
    <property>
        <name>hbase.zookeeper.quorum</name>
        <value>m1.example.com,m2.example.com</value>
    </property>
    <property>
        <name>hbase.zookeeper.property.dataDir</name>
        <value>/soft/zookeeper/data</value>
    </property>
    <property>
        <name>hbase.zookeeper.property.clientPort</name>
        <value>2181</value>
    </property>

regionservers 添加

m1.example.com
m2.example.com

backup-masters 添加

m1.example.com

下載 htrace-core-3.2.0-incubating.jar 到 hbase/lib 目錄中

curl -O http://central.maven.org/maven2/org/apache/htrace/htrace-core/3.2.0-incubating/htrace-core-3.2.0-incubating.jar

bin/hbase-env.sh 添加

export JAVA_HOME=/soft/jdk1.8
export HBASE_MANAGES_ZK=false

復(fù)制hbase到另一臺(tái)服務(wù)器上

scp -r hbase root@m2.example.com:/soft

另一臺(tái)的環(huán)境配置跟上面一樣

可以啟動(dòng)Hbase了

start-hbase.sh

嘗試創(chuàng)建一張表

hbase shell
create 'logTable',{NAME => 'info',TTL => '3 DAYS',CONFIGURATION => {'SPLIT_POLICY' => 'org.apache.hadoop.hbase.regionserver.KeyPrefixRegionSplitPolicy','KeyPrefixRegionSplitPolicy.prefix_length'=>'2'}},SPLITS => ['20','80']

訪問(wèn) http://m1.example.com:16010

提示

如果日志中出現(xiàn)下面的錯(cuò)誤

Master startup cannot progress, in holding-pattern until region onlined

則執(zhí)行zkCli.sh刪除meta信息,重啟Hbase即可

zkCli.sh -server 127.0.0.1
rmr /hbase/meta-region-server

心明眼亮的你、從此刻開(kāi)始。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書(shū)系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • Hbase 在大數(shù)據(jù)的體系中扮演著DB角色,不得不說(shuō)是重要的一員,在上一篇,大豬 已經(jīng)給大家演示了 Hadoop ...
    大豬大豬閱讀 2,970評(píng)論 16 91
  • > Hbase 在大數(shù)據(jù)的體系中扮演著DB角色,不得不說(shuō)是重要的一員,在上一篇,大豬 已經(jīng)給大家演示了 [Hado...
    大豬大豬閱讀 1,087評(píng)論 0 3
  • Hadoop HA集群搭建文檔.............................................
    鐘敏_1788閱讀 1,586評(píng)論 0 0
  • 1 Zookeeper概述# ZooKeeper是一個(gè)為分布式應(yīng)用所設(shè)計(jì)的分布的、開(kāi)源的協(xié)調(diào)服務(wù),它主要是用來(lái)解決...
    七寸知架構(gòu)閱讀 7,482評(píng)論 0 101
  • 在我腦海里有無(wú)數(shù)次見(jiàn)面的場(chǎng)景 永遠(yuǎn)抵不過(guò)相見(jiàn)時(shí)的觸目驚心~ 每天晚上我都會(huì)抽一嘴精神的鴉片 才能在夢(mèng)中搖搖欲墜 那...
    末的sara閱讀 112評(píng)論 0 0

友情鏈接更多精彩內(nèi)容