介紹 Hive的分析函數(shù)又叫窗口函數(shù)， 在oracle中就有這樣的分析函數(shù)，主要用來做數(shù)據(jù)統(tǒng)計(jì)分析的。Lag和Lead分析函數(shù)可以在同一次查詢中取出同一字段的前N行的數(shù)據(jù)【L...
發(fā)簡信
IP屬地：四川
-
Hive分析函數(shù)LAG和LEAD詳解
-
IDEA拉取Git出現(xiàn)0x80092013問題解決
發(fā)生原因 更新了IDEA到2020.2后，發(fā)現(xiàn)git pull或者push都會報(bào)這個錯誤。 過程 因在2020.1中并沒有發(fā)生這種錯誤，在git bash中也不會有，只存在于...
-
flink checkpoint/savepoint的metadata文件格式詳解源頭 flink的checkpoint和savepoint用于恢復(fù)作業(yè)狀態(tài)，在恢復(fù)作業(yè)時，如果存在多個checkpoint，將獲取最新的checkpoint來進(jìn)行恢復(fù)，沒有c...
-
Hive Grouping Sets多維分析
介紹 GROUPING SETS,GROUPING__ID,CUBE,ROLLUP：這幾個函數(shù)通常用于OLAP中，不能累加，而且需要根據(jù)不同維度上鉆和下鉆的指標(biāo)統(tǒng)計(jì)。 GRO...
-
-
Spark3.0系列(一)IDEA編譯Spark源碼閱讀源碼的第一步是下載Spark源碼，并導(dǎo)入到工具中閱讀。 下載 進(jìn)入http://spark.apache.org/downloads.html頁面，點(diǎn)擊download箭...
-
Spark3.0系列（二）Master啟動流程源碼解析問題 在Spark的standalone 模式中Master是如何啟動？ 在Master啟動后又做了哪些操作？ Master啟動流程 從Spark2.0開始就以及刪除了akk...
-
自定義udtf函數(shù)輸出多列
介紹 在hive中，可以對其進(jìn)行添加自定義的函數(shù)來滿足自己的特定場景的功能，hive中可以提供三種自定義函數(shù)： 普通函數(shù)：一進(jìn)一出 UDAF函數(shù)：多進(jìn)一出 UDTF函數(shù)：一進(jìn)...