發(fā)簡信
IP屬地：吉林
-
clickhouse寫入和副本同步過程
一： 概述 Clickhouse 插入數(shù)據(jù) Clickhouse 插入數(shù)據(jù)過程 當(dāng)需要在ReplicatedMergeTree中執(zhí)行INSERT...
-
Hadoop中Block和Split的區(qū)別
1 Block 當(dāng)我們把文件上傳到HDFS時，文件會被分塊，這個是真實(shí)物理上的劃分。每塊的大小可以通過hadoop-default.xml里配置...
-
大數(shù)據(jù)之zookeeper
1： zookeeper 是什么 是一個針對大型分布式系統(tǒng)的可靠協(xié)調(diào)系統(tǒng)； 提供的功能包括：配置維護(hù)、名字服務(wù)、分布式同步、組服務(wù)等； zook...
-
yarn之資源調(diào)度器1: yarn 資源調(diào)度的定義 2： yarn 資源調(diào)度的種類 在Yarn中有三種調(diào)度器可以選擇：FIFO Scheduler，Capacity...
-
mysql 外鍵那些事
FOREIGNKEYp: 外鍵約束，保持?jǐn)?shù)據(jù)一致性，完整性。實(shí)現(xiàn)一對一或一對多關(guān)系。 外鍵約束的要求： 1，父表和子表必須使用相同的存儲引擎，而...
-
數(shù)據(jù)治理的定義和架構(gòu)數(shù)據(jù)治理的定義 數(shù)據(jù)治理(DataGovernance)，是企業(yè)數(shù)據(jù)治理部門發(fā)起并推行的，關(guān)于如何制定和實(shí)施針對整個企業(yè)內(nèi)部數(shù)據(jù)的商業(yè)...
-
Cassandra
簡介 Apache Cassandra 是一個大規(guī)?？蓴U(kuò)展的分布式開源NoSQL數(shù)據(jù)庫，完美適用于跨數(shù)據(jù)中心／云端的結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非...
-
聊一聊所謂的alluxio1: alluxio是什么 Alluxio : 開源分布式內(nèi)存文件系統(tǒng)， 簡而言之就是，你不用每次都從原始文件去讀，如果你的文件在alluxio...
-
Spark Streaming＋Kafka的offset管理方法
本篇主要介紹一下Spark Streaming在消費(fèi)Kafka過程中，當(dāng)出現(xiàn)程序掛掉重啟后，找到上次消費(fèi)過的最后一次數(shù)據(jù)，確保kafka數(shù)據(jù)精確...
個人介紹