IP屬地：上海
-
如何在 Inceptor 中使用日期函數(shù)獲取與轉(zhuǎn)換時間
Inceptor 日期函數(shù)之 時間獲取與轉(zhuǎn)換 Inceptor 可以理解成 Hive，Inceptor 的日期函數(shù)基本兼容 Hive。從哪個 S...
-
brew upgrade引發(fā)的ssl小問題brew upgrade 今天手哆嗦了一下，brew upgrade打出去了，然后開始自動更新所有的包…… 過了一會需要寫代碼了，打開pycha...
-
范圍分區(qū)-思考
按月分區(qū)之前的模型設計師及架構(gòu)師留下的表分區(qū)為STRING型的etl_time:20181222153000（年月日時分秒）image.png ...
-
Linux小技巧：刪除指定時間前的文件
環(huán)境：centos系統(tǒng) 顯示20分鐘前的文件find /home/prestat/bills/test -type f -mmin +20 -e...
-
hive表分桶設計
分桶字段選擇 進行分桶之前需要對表的數(shù)據(jù)分布情況進行大致的分析，一般遵循的原則為，選擇離散度高的字段進行分桶?？梢酝ㄟ^收集的數(shù)據(jù)特征，如Dist...
-
Hive調(diào)優(yōu)
本文種記錄的大多是開源版本hive調(diào)優(yōu)方式 我也會補充TDH集群Inceptor的優(yōu)化方式 面試必備技能-HiveSQL優(yōu)化 Hive SQL基...
-
數(shù)據(jù)倉庫之建設
背景篇 目前所在項目中,人員配置:項目經(jīng)理(4)業(yè)務分析師報表開發(fā)工程師(2,4)etl工程師大數(shù)據(jù)開發(fā)工程師(4)人員壓縮可參考括號內(nèi) 分析篇...
-
Linux命令之sed
簡介篇 書中翻譯sed是字符流編輯器 與常使用的交互式編輯器（如vim）不同,sed編輯器以批處理的方式來編輯文件,這比交互式編輯器快得多,可以...
-
CentOS安裝Python3 2018-12-05今天需要在生產(chǎn)環(huán)境部署兩個程序,都是解析API數(shù)據(jù)的,依賴python3,所以記錄下部署過程. * 第一步是查看系統(tǒng)環(huán)境信息 系統(tǒng)是centos...