首先回答一個問題,數(shù)倉工程師的職責是什么?個人認為就是要使得數(shù)據(jù)流通起來,把數(shù)據(jù)從一個地方傳輸?shù)搅硪粋€地方,在當前的大數(shù)據(jù)技術(shù)發(fā)展背景下,大多數(shù)的數(shù)倉人員都是使用SQL來實現(xiàn)...
發(fā)簡信
IP屬地：上海
-
2022-10-09-數(shù)倉職業(yè)從業(yè)困惑和焦慮
-
"數(shù)據(jù)中臺不是設(shè)計出來的而是沉淀出來的", 已有一定的體會, 實際工作中, 幾乎所有人都被大量的業(yè)務(wù)需求埋著的, 愿意花時間解決的, 都是企業(yè)或部門長期積累到無法忍受的痛點. 想要一個完美的全面的解決方案, 短時間是不可能完成的, 往往要結(jié)合每個發(fā)展階段, 結(jié)合痛點和各方面資源一步步解決, 累加, 迭代而成的
分布式數(shù)據(jù)倉庫
這章看得我有點懵,對我來說沒什么用,這章有點數(shù)據(jù)中臺的味道,記得我上司說過數(shù)據(jù)中臺不是設(shè)計出來的而是沉淀出來的 大部分環(huán)境中采用一個集中式數(shù)據(jù)倉庫,但是在某些特定場合,可以建...
-
java 好久沒寫了，俺也不會寫了。。。??
2021-07-14-Hive-27(Hive編程指南-基礎(chǔ)知識)
用戶如何從一個現(xiàn)有的數(shù)據(jù)基礎(chǔ)架構(gòu)轉(zhuǎn)移到Hadoop上,而這個基礎(chǔ)架構(gòu)是基于傳統(tǒng)關(guān)系型數(shù)據(jù)庫和結(jié)構(gòu)化查詢語句(SQL)的。對于大量的SQL用戶(包括專業(yè)數(shù)據(jù)庫設(shè)計師和管理員,也...
-
2021-07-14-Hive-27(Hive編程指南-基礎(chǔ)知識)用戶如何從一個現(xiàn)有的數(shù)據(jù)基礎(chǔ)架構(gòu)轉(zhuǎn)移到Hadoop上,而這個基礎(chǔ)架構(gòu)是基于傳統(tǒng)關(guān)系型數(shù)據(jù)庫和結(jié)構(gòu)化查詢語句(SQL)的。對于大量的SQL用戶(包括專業(yè)數(shù)據(jù)庫設(shè)計師和管理員,也...
-
2021-06(完成事項)
本月計劃 計劃在端午節(jié)之前確定技術(shù)分享內(nèi)容并在端午節(jié)期間完成相關(guān)的ppt內(nèi)容制作 把5月份未完成的存在主義心理治療書籍給讀完 關(guān)于數(shù)據(jù)命名規(guī)范和數(shù)據(jù)治理的學習(有個概念就行 ...
-
離散數(shù)學(二元關(guān)系)
1. 序偶和笛卡爾積 有序組的定義 由兩個元素按照一定的次序組成的二元組稱為序偶，記作< x, y >，其中 x 是第一元素，y 是第二元素。 笛卡兒積 設(shè) A, B 是兩個...
-
SQL-分組月度環(huán)比同比
有一個需求是按月份統(tǒng)計環(huán)比和同比值,每次都取一遍非常麻煩,同時也容易出錯,這里我把要取的數(shù)據(jù)報表化,這里提供一個模板,這個SQL寫了我好久,經(jīng)過對比數(shù)據(jù)發(fā)現(xiàn),這樣寫是沒什么問...
-
存在主義心理治療(七)
讀點書 《存在主義心理治療》意志 1. 責任,意志與行動 日本諺語有云:“知而不行,就是完全不知?！必熑蔚挠X察,本身并不等于改變;它只是改變過程的第一步。我在上一章說過,病...
-
2021-06-15-Hive-25(spark中的join)
spark中的join策略 大概可以分為三種,shuffle join 和broadcast join 非常常見,這是介紹一下桶join(hash join) 1.shuf...
-
關(guān)于客流量問題的討論(多使用方的一致性)
對于一般的業(yè)務(wù)客流量就是簡單sum(person) 但是在酒店,住宿的問題上就陷入了困難,一般的酒店訂單會包含預定房間數(shù),人數(shù) 問題1:如果使用sum(person),直接統(tǒng)...
-
不會休息了，唉，又佩服又羨慕又無奈
制定一個計劃(5.1學習計劃)-2021-05-01
5.1把ihub上要完成的考試給完成了適當休息了,一下,其實也沒怎么休息....發(fā)現(xiàn)不會休息了.....怎么才是高效的休息計劃5.2-5.4的學習計劃,堅決不能出去玩 計劃如...
-
-
-
用戶行為分析 SQL 整理
筆者從事大數(shù)據(jù)行業(yè)快三年時間，在用戶行為分析方向也有所沉淀?，F(xiàn)在整理一些常用的 SQL ，希望本文對用戶行為分析的初學者的 SQL 學習有所幫助。 行業(yè)內(nèi)用的數(shù)據(jù)系統(tǒng)各式各樣...
