發(fā)簡信
IP屬地：浙江
SQL開發(fā)中經(jīng)常要用到日期類型的轉(zhuǎn)換。一如yyyymmdd和yyyy-mm-dd日期之間的切換常用轉(zhuǎn)換方法如下：方法1: from_unixti...
此前一直使用HIVE的Insert overwrite到本地目錄的方法進行文件導(dǎo)出，但問題多多。主要原因是分隔符經(jīng)常出現(xiàn)在字段中，實操中用豎杠|...
HIVE數(shù)據(jù)導(dǎo)出的姿勢 1.問題描述 之前一直使用hive -e "SELECT XXX FROM XXX" > /XXX/XXX.csv 命令...
Spark運行在Standalone模式下產(chǎn)生的臨時目錄的問題 1.問題描述 收到運維線上告警。告警信息：文件系統(tǒng)剩余空間小于5% on vol...
數(shù)據(jù)庫范式設(shè)計的意義 通常把一個數(shù)據(jù)庫分成兩個或多個表并定義表之間的關(guān)系以做到數(shù)據(jù)隔離，添加、刪除和修改某個字段只需要在一個表中進行，接著可以通...
為什么要健身？ 身體是革命的本錢，干啥事沒個健康健壯的身體，能成嗎。 程序員久坐，對頸椎腰椎前列腺不好，得活動活動筋骨，有助于活久點。 健身可以...
頭頂?shù)奶?燃燒著青春的余熱它從來不會放棄 照耀著我們行進寒冬不經(jīng)過這里 那只是迷霧的山林走完蒼老的石橋 感到潮濕的味道翻過那青山 你說你看頭頂...
數(shù)據(jù)遷移 1、問題描述 新搭建了一套CDH5.13.1集群，需要將原apache上的數(shù)據(jù)遷移至新集群。 2、數(shù)據(jù)遷移工具 Distcp（分布式拷...
在編寫shell腳本的時候經(jīng)常會用到引號，有些時候卻老是忘記單引號和雙引號之間的區(qū)別， 所以就整理一下供以后腦子不好使了的時候前來復(fù)習一下。首先...