hbase集群同步

由于當(dāng)前階段需要對生產(chǎn)集群(cdh5.14,)的hbase數(shù)據(jù)進(jìn)行災(zāi)備(備份集群cdh6.1),開始調(diào)研hbase的集群同步方案。
主要是兩種場景:

  • 需要hbase的存量數(shù)據(jù)。有些業(yè)務(wù)已經(jīng)積累了大量數(shù)據(jù)。
  • 不需要hbase的存量數(shù)據(jù)。這種主要是一些表的數(shù)據(jù)很快全量更新的,另外一些表可以新建。

調(diào)研

  • 支持cdh5與cdh6集群之間的同步

不會同步的修改

  • 同步之前的數(shù)據(jù)
  • 繞過了WAL的操作。比如BulkLoad 或者 `write

todo

一個常見的集群同步案例

image.png
  • 方塊是集群
  • 有向連接性表示數(shù)據(jù)同步的方向

參考

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 一、簡介 Hbase:全名Hadoop DataBase,是一種開源的,可伸縮的,嚴(yán)格一致性(并非最終一致性)的分...
    菜鳥小玄閱讀 2,603評論 0 12
  • 本文首先簡單介紹了HBase,然后重點講述了HBase的高并發(fā)和實時處理數(shù)據(jù) 、HBase數(shù)據(jù)模型、HBase物理...
    達(dá)微閱讀 2,831評論 1 13
  • 初次接觸HBase的讀者,建議先閱讀淺析HBase:為高效的可擴(kuò)展大規(guī)模分布式系統(tǒng)而生 HBase的構(gòu)成 物理上來...
    耀凱考前突擊大師閱讀 5,386評論 0 12
  • 沒有說出口的愛,便不算愛?!?莎士比亞。 簡書的一大優(yōu)點是讓天涯若比鄰成為現(xiàn)實。不論你住在哪里,是在中國的...
    芋璇閱讀 309評論 0 2
  • 近幾天來,大家討論最多的莫過于簡書此次的升級,這次升級帶來最大的變化是有了能量條的設(shè)置,也就意味著每天我們點贊的數(shù)...
    螳螂不捕嬋閱讀 588評論 4 17

友情鏈接更多精彩內(nèi)容