一，前言 主數(shù)據(jù)和參考數(shù)據(jù)在我們數(shù)據(jù)開發(fā)或者JavaWeb開發(fā)的同學(xué)都有經(jīng)常接觸，并且是大量的使用和分析場景，在數(shù)據(jù)治理中提到的一些專業(yè)名詞在數(shù)據(jù)倉庫中或者業(yè)務(wù)的RDBMS庫...
發(fā)簡信
IP屬地：遼寧
-
土味兒說明數(shù)據(jù)治理-主數(shù)據(jù)&參考數(shù)據(jù)（參考數(shù)據(jù)） -
@只是甲 如果是敏捷開發(fā)，建議使用阿里公有云的大數(shù)據(jù)產(chǎn)品。如果不想被云廠商捆綁，就自己搭建原生的，用普羅米修斯做一些監(jiān)控報(bào)警功能，我覺得和CDH區(qū)別不大。上層的調(diào)度系統(tǒng)可以自己開發(fā)。
CDH6.2/6.3安裝Flink
Flink安裝包下載地址 接下來只需三步操作 然后再CDH集權(quán)檢查新的parcel就會(huì)出現(xiàn)flink了如果檢查不到新的 parcel，就把CM重啟一下，配置和spark沒什么區(qū)別
-
@只是甲 不好意思啊，CDH收費(fèi)后，我就沒玩過了
CDH6.2/6.3安裝Flink
Flink安裝包下載地址 接下來只需三步操作 然后再CDH集權(quán)檢查新的parcel就會(huì)出現(xiàn)flink了如果檢查不到新的 parcel，就把CM重啟一下，配置和spark沒什么區(qū)別
-
@10bfd717d47d 這個(gè)直接去下載就好，可能我的版本和你的版本不一樣，也會(huì)給你帶來麻煩
淺談CDH5.16.2安裝phoenix之大坑無限
第一大坑：我的是cdh5.16.2,hbase版本為1.20 ，網(wǎng)上找了很多資料，沒有匹配的版本，于是乎，抱著僥幸的心態(tài)去試了一個(gè)4.7的版本，最終以失敗告終，（如何查看HB...
-
FocusBI: BI總線矩陣(原創(chuàng))總線矩陣也是BI核心之一，基本上只要詳細(xì)了解企業(yè)業(yè)務(wù)戰(zhàn)略線就能得出總線矩陣，它對應(yīng)著企業(yè)每一個(gè)業(yè)務(wù)單元，提取業(yè)務(wù)單元中的一致性維度和事實(shí)量值組組合成企業(yè)總線矩陣也就是多維分析...
-
0）Hive解析Ngxin日志中的時(shí)間
時(shí)間格式 ：04/Jun/2021:22:11:18 +0800這個(gè)時(shí)間是個(gè)并非Nginx的標(biāo)準(zhǔn)時(shí)間格式 ，原始的為 ：[04/Jun/2021:22:11:18 +0800...
-
sparkStreaming使用zookeeper管理KafkaOffset方案
天地四方皆江湖，世人聰明反糊涂。名利場上風(fēng)浪起，贏到頭來卻是輸。----俠客行 先上maven依賴 先來個(gè)sparkStreaming的啟動(dòng)程序 再來個(gè)zookeeper的工...
-
FlinkAPI硬核推薦
因?yàn)樽罱?xiàng)目需求，需要使用Flink框架做一個(gè)實(shí)時(shí)數(shù)倉，其中用到了kafka，redis，hbase，mysql，flink.但面臨的問題是我沒有使用過flink，只能現(xiàn)學(xué)現(xiàn)...
-
建議你以后把格式寫的好看一些
Flink實(shí)戰(zhàn)：FlinkSQL接收開啟Kerberos認(rèn)證的Kafka集群數(shù)據(jù)存入MySQL
微信公眾號：大數(shù)據(jù)開發(fā)運(yùn)維架構(gòu) 關(guān)注可了解更多大數(shù)據(jù)相關(guān)的資訊。問題或建議，請公眾號留言; 如果您覺得“大數(shù)據(jù)開發(fā)運(yùn)維架構(gòu)”對你有幫助，歡迎轉(zhuǎn)發(fā)朋友圈 從微信公眾號拷貝過來，...
-
CDH6.2/6.3安裝Flink
Flink安裝包下載地址 接下來只需三步操作 然后再CDH集權(quán)檢查新的parcel就會(huì)出現(xiàn)flink了如果檢查不到新的 parcel，就把CM重啟一下，配置和spark沒什么區(qū)別
-
ES單機(jī)版的安裝—centos
ES單機(jī)版的安裝—centos 1.Java環(huán)境安裝 elasticsearch需要Java8環(huán)境。首先需要安裝Java8centos7安裝Java8# 更新源yum upd...
-
-
大數(shù)據(jù)sqoop導(dǎo)入導(dǎo)出及環(huán)境變量配置
1，檢查是否裝了JDK，JDK版本建議（必須）在1.8或以上，如果沒有裝JDK，sqoop提交運(yùn)行的時(shí)候，使用的jre會(huì)報(bào)錯(cuò) 2，檢查/etc/profile中有沒有配置JD...
