Mpp 架構(gòu)（大規(guī)模并行處理）：核心思想是"分而治之"，它將龐大的計(jì)算任務(wù)拆分成許多小任務(wù)，分發(fā)到多臺服務(wù)器節(jié)點(diǎn)上并行處理，最后合并結(jié)果，以此顯著提升數(shù)據(jù)處理效率。 其核心每...
發(fā)簡信
IP屬地：海南
-
Lambda、Kappa & NoSQL & LSM-Tree vs. B-Tree -
什么是指標(biāo)體系什么是指標(biāo)： 指標(biāo)：通過特定的統(tǒng)計(jì)邏輯計(jì)算出來能量化事物發(fā)展程度的度量，如pv，uv； 維度：可以簡單理解為我們分析觀察指標(biāo)的角度，如時(shí)間、年齡、渠道、終端； 北極星指標(biāo) 指...
-
sql優(yōu)化核心思想讀書筆記oracle存儲：block extent segment (clob字段影響：單獨(dú)存放一個(gè)段）10046事件監(jiān)控等待事件 10046 trace文件等待事件為db...
-
數(shù)倉規(guī)范
轉(zhuǎn)自： https://mp.weixin.qq.com/s/mGkYRj8iV5_QvNMjS7bpIQ[https://mp.weixin.qq.com/s/mGkYRj...
-
-
2022-04-070x00 概述 隨著大數(shù)據(jù)時(shí)代的帶來，數(shù)據(jù)的應(yīng)用也日趨繁茂，越來越多的應(yīng)用和服務(wù)都基于數(shù)據(jù)而建立，數(shù)據(jù)的重要性不言而喻。而且，數(shù)據(jù)質(zhì)量是數(shù)據(jù)分析和數(shù)據(jù)挖掘結(jié)論有效性和準(zhǔn)確性的...
-
維度建模（Kimball架構(gòu)）一、概念解讀 業(yè)務(wù)板塊 業(yè)務(wù)板塊是邏輯空間的定義，是基于業(yè)務(wù)特征劃分的命名空間 數(shù)據(jù)域 指面向業(yè)務(wù)分析，將業(yè)務(wù)過程或者維度進(jìn)行抽象的集合。其中，業(yè)務(wù)過程可以概括為一個(gè)個(gè)不可拆...
-
-
-
數(shù)據(jù)成本待補(bǔ)充計(jì)算成本相關(guān)內(nèi)容 存儲成本1、結(jié)合數(shù)據(jù)資產(chǎn)等級和數(shù)據(jù)倉分層，對數(shù)據(jù)生命周期進(jìn)行管理（數(shù)據(jù)清理）2、利用誰生產(chǎn)誰負(fù)責(zé)和榜單機(jī)制進(jìn)行自驅(qū)式管理 成本管理架構(gòu) 成本管理難點(diǎn) ...
-
數(shù)據(jù)質(zhì)量保障目標(biāo) 準(zhǔn)確、及時(shí)、完整、一致準(zhǔn)確性：正確的描述對象；合規(guī)性：以標(biāo)準(zhǔn)、合規(guī)格式存儲數(shù)據(jù)；一致性：同一指標(biāo)數(shù)據(jù)值保持一致，不沖突；重復(fù)性：同一數(shù)據(jù)記錄保持唯一、不重復(fù)；及時(shí)性...
-
-
經(jīng)營分析
分析框架1、制定KPI指標(biāo)及目標(biāo)值2、按月分解目標(biāo)（注意周期趨勢），然后拆分到部分或個(gè)人3、跟進(jìn)目標(biāo)完成（當(dāng)期和累計(jì)）情況，根據(jù)結(jié)構(gòu)分析法和趨勢分析法看是哪塊沒完成，是一直沒...
-
-
數(shù)據(jù)湖一、什么是數(shù)據(jù)湖 AWS定義：數(shù)據(jù)湖是一個(gè)集中式存儲庫，允許您以任意規(guī)模存儲所有結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。您可以按原樣存儲數(shù)據(jù)（無需先對數(shù)據(jù)進(jìn)行結(jié)構(gòu)化處理），并運(yùn)行不同類型的分析...
