今天是新年上班第二天,重要的是要羅列2024年計(jì)劃、同時(shí)總結(jié)2023年。分為4個(gè)模塊展開:個(gè)人習(xí)慣、工作學(xué)習(xí)提升、生活學(xué)習(xí)提升、鍛煉 一、2024計(jì)劃 1、個(gè)人習(xí)慣 我還是喜...
發(fā)簡信
IP屬地：山東
-
2023年回顧 | 2024計(jì)劃?期望 -
數(shù)據(jù)倉庫系列10- 數(shù)據(jù)倉庫規(guī)范一. 數(shù)據(jù)模型架構(gòu)原則 1.1 數(shù)據(jù)倉庫分層 分層的好處： 清晰數(shù)據(jù)結(jié)構(gòu)； 數(shù)據(jù)血緣追蹤； 減少重復(fù)開發(fā)； 數(shù)據(jù)關(guān)系條理化； 屏蔽原始數(shù)據(jù)的影響。 當(dāng)前DW結(jié)構(gòu)現(xiàn)況 1.1....
-
Spark性能優(yōu)化指南——基礎(chǔ)篇前言 在大數(shù)據(jù)計(jì)算領(lǐng)域，Spark已經(jīng)成為了越來越流行、越來越受歡迎的計(jì)算平臺之一。Spark的功能涵蓋了大數(shù)據(jù)領(lǐng)域的離線批處理、SQL類處理、流式/實(shí)時(shí)計(jì)算、機(jī)器學(xué)習(xí)、圖計(jì)...
-
mysql 5.7版本實(shí)現(xiàn)row_number()over()分組排序
針對5.7.3的版本,文章一定要看"注意點(diǎn)"部分 一、分組排序 實(shí)現(xiàn)如下功能：row_number()over(partition by A order by B) 1、場景...
-
6個(gè)步驟實(shí)現(xiàn)-數(shù)倉數(shù)據(jù)只加工一次?《數(shù)據(jù)中臺》課程總結(jié)、 目錄：一、元數(shù)據(jù)1、數(shù)據(jù)字典2、數(shù)據(jù)血緣3、數(shù)據(jù)特征二、指標(biāo)管理1、如何規(guī)范化定義指標(biāo)三、數(shù)據(jù)模型1、我建模的方法2、理想的數(shù)倉模型設(shè)計(jì)應(yīng)該具備的因素3、已經(jīng)存在煙囪式開...
-
建設(shè)方法論onedate：極客數(shù)據(jù)中臺課程總結(jié)文章大部分內(nèi)容摘錄自極客數(shù)據(jù)中臺課程：https://time.geekbang.org/column/article/220290 一、前言 數(shù)據(jù)開發(fā)職業(yè)規(guī)劃：熟練的使用數(shù)...
-
更換icarus主題記錄
原文: 更換icarus主題記錄date: 2019-04-02 15:23:22 [TOC] 前言 終于把用了兩年多的NexT主題換掉了, 之前喜歡這個(gè)主題是因?yàn)楹诎變缮@...
-
轉(zhuǎn)行測試30天｜想要摸測試門道的我，第一天做了什么｜01
寫在前面 這并不是一個(gè)已經(jīng)轉(zhuǎn)行成功的測試人員寫的東西，而是作為一個(gè)小白的轉(zhuǎn)行測試記錄，我只對我自己寫的東西負(fù)責(zé)，酌情觀看，請勿當(dāng)真。寫這個(gè)系列不過是督促自己學(xué)習(xí)而已，并不是分...
-
我寫錯(cuò)了。我改成攔截器
flume自定義攔截器，步驟詳解
文章還沒寫好，哈哈哈。先別看喔-------------------- 一、flume自定義攔截器步驟如下 1）繼承接口：org.apache.flume.intercept...
-
flume自定義攔截器，步驟詳解文章還沒寫好，哈哈哈。先別看喔-------------------- 一、flume自定義攔截器步驟如下 1）繼承接口：org.apache.flume.intercept...
-
我偷偷的寫的??
hive自定義UDTF函數(shù)，步驟講解
目錄：一、繼承GenericUDTF抽象類二、重寫方法initialize()三、實(shí)現(xiàn)抽象方法process()四、實(shí)現(xiàn)抽象方法close()五、自定義將一行字符串轉(zhuǎn)多行代碼...
-
hive自定義UDF函數(shù)，步驟詳解目錄一、自定義UDF函數(shù)--計(jì)算字符串長度1、添加pom.xml文件2、自定義UDF函數(shù)，java類3、打包上傳到liunx二、創(chuàng)建hive函數(shù)1、hive客戶端，添加jar...
-
hive自定義UDTF函數(shù)，步驟講解目錄：一、繼承GenericUDTF抽象類二、重寫方法initialize()三、實(shí)現(xiàn)抽象方法process()四、實(shí)現(xiàn)抽象方法close()五、自定義將一行字符串轉(zhuǎn)多行代碼...
-
Hive添加或刪除字段官方文檔[https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManual...
-
java 日期相關(guān)Date、SimpleDateFormat、Calendar區(qū)別與使用本篇文章主要摘錄了4篇文章的內(nèi)容，原文在文末在java中時(shí)間類主要有Date、Calendar、SimpleDateFormat，暫時(shí)只介紹 java.util.*下的時(shí)間類...
-
Sqoop 的基本使用轉(zhuǎn)載自：Sqoop 的基本使用[https://blog.csdn.net/m0_37809146/article/details/91127801] 目錄:一、Sqoop ...
-
shell執(zhí)行SQL腳本:hive -e和hive -f，及案例練習(xí)hive -e“-e”不進(jìn)入hive的交互窗口執(zhí)行sql語句，hive -e 后面跟hivesql字符串 hive -f“-f”執(zhí)行腳本中sql語句 知道了語法，我們下面來看...
-
hive中UDTF函數(shù)explode詳解 + explode與lateral view 3套案例練習(xí)前言:每次使用UDTF函數(shù)的時(shí)候都要百度，會用但一直一知半解，今天對UDTF函數(shù)做一個(gè)總結(jié)。 目錄：一、UDTF函數(shù) explode() 講解二、百度explode()，總會...
-
自定義flume攔截器-練習(xí)1參考文章1：Flume 自定義 Interceptor（攔截器）[https://www.cnblogs.com/jhxxb/p/11582804.html]參考文章2：ja...