IP屬地：吉林
-
Hadoop配置Kerberos互信
當(dāng)Hadoop集群開(kāi)啟Kerberos后，跨集群訪問(wèn)需要配置Kerberos cross-realm(跨域訪問(wèn))。 Kerberos跨域訪問(wèn)原理...
-
HBase RegionServer動(dòng)態(tài)感知過(guò)程HBase支持集群動(dòng)態(tài)擴(kuò)容，都?xì)w功于HMaster對(duì)HRegionServer的動(dòng)態(tài)感知。本文基于hbase-1.2.0-cdh5.7.2版本進(jìn)...
-
HBase 壓縮策略DateTieredCompactionPolicyHBase是采用Log-Structured Merge Tree的架構(gòu)，隨著Flush階段的不斷觸發(fā)，生成許多的HFile（默認(rèn)128M），而...
-
spark application job自定義日志輸出前言 spark默認(rèn)采用log4j作為日志框架，并且采用${SPARK_HOME}/conf/log4j.properties作為默認(rèn)的日志配置...
-
開(kāi)發(fā)部署HBase Endpoint Coprocessor一、前言 本文示例協(xié)處理器實(shí)現(xiàn)根據(jù)scan條件對(duì)指點(diǎn)列進(jìn)行count、avg。這里推薦HBase技術(shù)社區(qū)文章，該文非常詳細(xì)的介紹了如何開(kāi)發(fā)并部署...
-
python2訪問(wèn)CDH HBase Thrift2簡(jiǎn)介 HBase Thrift Server是hbase基于Apache Thrift開(kāi)發(fā)用來(lái)提供對(duì)多語(yǔ)言支持的服務(wù)。同時(shí)保留了thrift和t...
-
Unable to start NodeManager: no leveldbjni64-1.8 in java.library.path近日生產(chǎn)CDH5.7.2集群中的某一臺(tái)機(jī)器在升級(jí)glibc和java后，Yarn NodeManager無(wú)法正常啟動(dòng)，提示報(bào)錯(cuò)如下： 處理該問(wèn)題...
-
HBase meta表介紹
在網(wǎng)上較多的文章都會(huì)介紹hbase的兩個(gè)關(guān)鍵表ROOT表與meta表。其實(shí)在hbase0.98之后，hbase就廢棄了ROOT表，僅保留meta...
-
CDH開(kāi)啟HBase Replication一、環(huán)境準(zhǔn)備 1、要求兩套集群安裝相同的CDH版本，如都為CDH4或者CDH5，不限定小版本2、要求兩套集群網(wǎng)絡(luò)互通，至少保證Master HB...