發(fā)簡信
IP屬地：遼寧
-
土味兒說明數(shù)據(jù)治理-主數(shù)據(jù)&參考數(shù)據(jù)（參考數(shù)據(jù)）一，前言 主數(shù)據(jù)和參考數(shù)據(jù)在我們數(shù)據(jù)開發(fā)或者JavaWeb開發(fā)的同學(xué)都有經(jīng)常接觸，并且是大量的使用和分析場景，在數(shù)據(jù)治理中提到的一些專業(yè)名詞在數(shù)...
-
0）Hive解析Ngxin日志中的時間
時間格式 ：04/Jun/2021:22:11:18 +0800這個時間是個并非Nginx的標(biāo)準(zhǔn)時間格式 ，原始的為 ：[04/Jun/2021...
-
sparkStreaming使用zookeeper管理KafkaOffset方案
天地四方皆江湖，世人聰明反糊涂。名利場上風(fēng)浪起，贏到頭來卻是輸。----俠客行 先上maven依賴 先來個sparkStreaming的啟動程序...
-
FlinkAPI硬核推薦
因為最近項目需求，需要使用Flink框架做一個實時數(shù)倉，其中用到了kafka，redis，hbase，mysql，flink.但面臨的問題是我沒...
-
CDH6.2/6.3安裝Flink
Flink安裝包下載地址 接下來只需三步操作 然后再CDH集權(quán)檢查新的parcel就會出現(xiàn)flink了如果檢查不到新的 parcel，就把CM重...
-
大數(shù)據(jù)sqoop導(dǎo)入導(dǎo)出及環(huán)境變量配置
1，檢查是否裝了JDK，JDK版本建議（必須）在1.8或以上，如果沒有裝JDK，sqoop提交運行的時候，使用的jre會報錯 2，檢查/etc/...
-
開發(fā)環(huán)境搭建CDH
CDH安裝筆記 安裝CDH我們需要做的幾件事： 溫馨提示：不要一步一步照抄 1 ，選擇centos對應(yīng)版本的CDH安裝包（我選擇的系統(tǒng)是： ce...