技術(shù)選型 數(shù)據(jù)存儲(chǔ) 考慮到數(shù)據(jù)量較大,采用傳統(tǒng)的關(guān)系型數(shù)據(jù)庫已經(jīng)不太合適,需要做大量的分庫分表操作。因此考慮nosql的方式,常見的nosql...
海量數(shù)據(jù)如何分庫分表 一般我們的分庫策略有時(shí)間,類型,頻率,下面來一一說明怎么分庫: (1)按時(shí)間分 按時(shí)間分的好處有很多。第一,可以做數(shù)...
flink實(shí)現(xiàn)指標(biāo)監(jiān)控 數(shù)據(jù)監(jiān)控都要求實(shí)時(shí)性,我把監(jiān)控分為2種,一種是有狀態(tài)監(jiān)控,一種是無狀態(tài)監(jiān)控。有狀態(tài)就是指指標(biāo)的計(jì)算依賴于之前的數(shù)據(jù),...
關(guān)于hbase和hive的選擇 hbase是一個(gè)nosql數(shù)據(jù)庫,它能提供實(shí)時(shí)寫入和實(shí)時(shí)查詢,但是查詢的靈活性偏低,必須按其rowkey進(jìn)行...
Hbase生產(chǎn)實(shí)踐 背景 HBase是一個(gè)分布式的、面向列的開源數(shù)據(jù)庫,它是hadoop生態(tài)圈的一員,有海量數(shù)據(jù)存儲(chǔ)能力,對(duì)資源的消耗也相對(duì)較...
Hbase寫入性能優(yōu)化 背景 HBase是一個(gè)nosql數(shù)據(jù)庫,既然是數(shù)據(jù)庫,就會(huì)涉及到增刪改查,而...