今天是新年上班第二天,重要的是要羅列2024年計(jì)劃、同時(shí)總結(jié)2023年。分為4個(gè)模塊展開:個(gè)人習(xí)慣、工作學(xué)習(xí)提升、生活學(xué)習(xí)提升、鍛煉 一、2024計(jì)劃 1、個(gè)人習(xí)慣 我還是喜...
今天是新年上班第二天,重要的是要羅列2024年計(jì)劃、同時(shí)總結(jié)2023年。分為4個(gè)模塊展開:個(gè)人習(xí)慣、工作學(xué)習(xí)提升、生活學(xué)習(xí)提升、鍛煉 一、2024計(jì)劃 1、個(gè)人習(xí)慣 我還是喜...
一. 數(shù)據(jù)模型架構(gòu)原則 1.1 數(shù)據(jù)倉庫分層 分層的好處: 清晰數(shù)據(jù)結(jié)構(gòu); 數(shù)據(jù)血緣追蹤; 減少重復(fù)開發(fā); 數(shù)據(jù)關(guān)系條理化; 屏蔽原始數(shù)據(jù)的影響。 當(dāng)前DW結(jié)構(gòu)現(xiàn)況 1.1....
前言 在大數(shù)據(jù)計(jì)算領(lǐng)域,Spark已經(jīng)成為了越來越流行、越來越受歡迎的計(jì)算平臺之一。Spark的功能涵蓋了大數(shù)據(jù)領(lǐng)域的離線批處理、SQL類處理、流式/實(shí)時(shí)計(jì)算、機(jī)器學(xué)習(xí)、圖計(jì)...
針對5.7.3的版本,文章一定要看"注意點(diǎn)"部分 一、分組排序 實(shí)現(xiàn)如下功能:row_number()over(partition by A order by B) 1、場景...
、 目錄:一、元數(shù)據(jù)1、數(shù)據(jù)字典2、數(shù)據(jù)血緣3、數(shù)據(jù)特征二、指標(biāo)管理1、如何規(guī)范化定義指標(biāo)三、數(shù)據(jù)模型1、我建模的方法2、理想的數(shù)倉模型設(shè)計(jì)應(yīng)該具備的因素3、已經(jīng)存在煙囪式開...
文章大部分內(nèi)容摘錄自極客數(shù)據(jù)中臺課程:https://time.geekbang.org/column/article/220290 一、前言 數(shù)據(jù)開發(fā)職業(yè)規(guī)劃:熟練的使用數(shù)...
原文: 更換icarus主題記錄date: 2019-04-02 15:23:22 [TOC] 前言 終于把用了兩年多的NexT主題換掉了, 之前喜歡這個(gè)主題是因?yàn)楹诎變缮@...
寫在前面 這并不是一個(gè)已經(jīng)轉(zhuǎn)行成功的測試人員寫的東西,而是作為一個(gè)小白的轉(zhuǎn)行測試記錄,我只對我自己寫的東西負(fù)責(zé),酌情觀看,請勿當(dāng)真。寫這個(gè)系列不過是督促自己學(xué)習(xí)而已,并不是分...
我寫錯(cuò)了。我改成攔截器
flume自定義攔截器,步驟詳解文章還沒寫好,哈哈哈。先別看喔-------------------- 一、flume自定義攔截器步驟如下 1)繼承接口:org.apache.flume.intercept...
文章還沒寫好,哈哈哈。先別看喔-------------------- 一、flume自定義攔截器步驟如下 1)繼承接口:org.apache.flume.intercept...
我偷偷的寫的??
hive自定義UDTF函數(shù),步驟講解目錄:一、繼承GenericUDTF抽象類二、重寫方法initialize()三、實(shí)現(xiàn)抽象方法process()四、實(shí)現(xiàn)抽象方法close()五、自定義將一行字符串轉(zhuǎn)多行代碼...
目錄一、自定義UDF函數(shù)--計(jì)算字符串長度1、添加pom.xml文件2、自定義UDF函數(shù),java類3、打包上傳到liunx二、創(chuàng)建hive函數(shù)1、hive客戶端,添加jar...
目錄:一、繼承GenericUDTF抽象類二、重寫方法initialize()三、實(shí)現(xiàn)抽象方法process()四、實(shí)現(xiàn)抽象方法close()五、自定義將一行字符串轉(zhuǎn)多行代碼...
官方文檔[https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManual...
本篇文章主要摘錄了4篇文章的內(nèi)容,原文在文末在java中時(shí)間類主要有Date、Calendar、SimpleDateFormat,暫時(shí)只介紹 java.util.*下的時(shí)間類...
轉(zhuǎn)載自:Sqoop 的基本使用[https://blog.csdn.net/m0_37809146/article/details/91127801] 目錄:一、Sqoop ...
hive -e“-e”不進(jìn)入hive的交互窗口執(zhí)行sql語句,hive -e 后面跟hivesql字符串 hive -f“-f”執(zhí)行腳本中sql語句 知道了語法,我們下面來看...
前言:每次使用UDTF函數(shù)的時(shí)候都要百度,會用但一直一知半解,今天對UDTF函數(shù)做一個(gè)總結(jié)。 目錄:一、UDTF函數(shù) explode() 講解二、百度explode(),總會...
參考文章1:Flume 自定義 Interceptor(攔截器)[https://www.cnblogs.com/jhxxb/p/11582804.html]參考文章2:ja...