Data Enrichment 在流式處理作業(yè)（特別是實時數(shù)倉ETL作業(yè)）中，我們的數(shù)據(jù)流可以視為無界事實表，其中往往缺乏一些維度信息。例如，對于埋點日志流而言，為了減少傳輸...
發(fā)簡信
IP屬地：上海
-
維度數(shù)據(jù)實時關聯(lián)的實踐（w/ Flink、Vert.x & Guava Cache） -
20 分鐘自動搭建大數(shù)據(jù)平臺下載鏡像 添加 hostsquickstart.cloudera 指向宿主機的 IP 啟動服務（宿主機要求 8G 內(nèi)存） 等待幾分鐘后，打開http://quickstart...
-
別把《山海經(jīng)》當故事看,?因為它的記載可能都是真的在中國一般比較牛的書都會用個“經(jīng)”字，什么道德經(jīng)、易經(jīng)、心經(jīng)等等，但是其中有一部“經(jīng)”非常有爭議，它就是“山海經(jīng)”。爭議的地方在于，有的人認為它所描述的東西對于現(xiàn)在研究很有價...
-
數(shù)據(jù)架構重構去年，對產(chǎn)品的數(shù)據(jù)架構進行了一次較大規(guī)模的重構。通過這次重構，大幅提升了整體性能和數(shù)據(jù)質量。在此，把這次數(shù)據(jù)架構重構的過程和心得總結一下，為以后數(shù)據(jù)架構設計提供些參考…… 一...
-
Apache Kafka詳解一、消息隊列Message Queue 兩種模式 點對點模式點對點模式是一個基于拉取或輪詢的消息傳送模型，由消費者主動拉取數(shù)據(jù)，客戶端需要實時開啟一個線程監(jiān)控隊列中是否有數(shù)據(jù)...
-
自從開始健身 我的生活真的全被毀了 ......
都說健身是個好東西 可以獲取好身材，可以更自信 但你不知道的是，自從開始健身 我的生活真的全被毀了 ...... 它偷走了我的時間 每星期的三次力量訓練，兩次有氧訓練， 穿插...
-
Apache Griffin入門指南一、前言 數(shù)據(jù)質量模塊是大數(shù)據(jù)平臺中必不可少的一個功能組件，Apache Griffin（以下簡稱Griffin）是一個開源的大數(shù)據(jù)數(shù)據(jù)質量解決方案，它支持批處理和流模式兩種...
