系統(tǒng)用的好好的，然后，睡眠之后，直接的進(jìn)入到了bash-4.2 使用起來(lái)特別的不方便，配置的一些全局變量都不起作用，需要輸入全路徑名，我很納悶為什么突然會(huì)進(jìn)入到這里，然后仔細(xì)...
發(fā)簡(jiǎn)信
IP屬地：江蘇
-
linux登錄進(jìn)入bash-4.2
-
idea開(kāi)發(fā)scala項(xiàng)目
??一般的，我們要使用idea開(kāi)發(fā)scala的話(huà)，idea會(huì)自動(dòng)的安裝默認(rèn)的scala，這里建議自己安裝配置scala，然后idea還需要安裝一個(gè)scala的插件。這里上面兩...
-
hive on tez中map任務(wù)的數(shù)量計(jì)算
首先說(shuō)明，本篇文章的內(nèi)容不是原創(chuàng)，因?yàn)樵馁|(zhì)量比較好，因此想進(jìn)一步的歸納總結(jié)， 原文鏈接 https://www.cnblogs.com/zackstang/p/11435...
-
將本地項(xiàng)目快速的提交到gitee首先在gitee上面創(chuàng)建倉(cāng)庫(kù) 然后進(jìn)入到本地項(xiàng)目文件夾，右鍵進(jìn)入到git bash命令行 初始化本地的git倉(cāng)庫(kù)，生成.git文件 將本地倉(cāng)庫(kù)提交的遠(yuǎn)程倉(cāng)庫(kù)的鏈接地址 將本地...
-
hive使用parquet及壓縮數(shù)據(jù)大小前后對(duì)比上傳txt文件到hdfs，txt文件大小是74左右。 這里提醒一下，是不是說(shuō)pzrquet加lzo可以把數(shù)據(jù)壓縮到這個(gè)地步，因?yàn)槲业臏y(cè)試數(shù)據(jù)存在大量重復(fù)。所以下面使用parq...
-
hive存儲(chǔ)parquet表parquet格式的表在生產(chǎn)環(huán)境中經(jīng)常被使用到，具有列式存儲(chǔ)和壓縮等特點(diǎn)，我們?cè)趺丛趆ive中存儲(chǔ)parquet格式的表呢。 使用數(shù)據(jù) 這里使用oracle的emp表 創(chuàng)建p...
-
hive文件存儲(chǔ)格式和分隔符
hive會(huì)為每個(gè)database創(chuàng)建對(duì)應(yīng)的文件夾，表會(huì)在這個(gè)文件里面創(chuàng)建對(duì)應(yīng)的子目錄。表中的數(shù)據(jù)會(huì)以目錄中的文件的形式存儲(chǔ)起來(lái)。對(duì)于default數(shù)據(jù)庫(kù)，默認(rèn)的缺省數(shù)據(jù)庫(kù)是沒(méi)...
-
hive數(shù)據(jù)遷移實(shí)例
公司要完成hive數(shù)據(jù)遷移1.創(chuàng)建hdfs臨時(shí)文件夾來(lái)保存數(shù)據(jù) 生成數(shù)據(jù)導(dǎo)出腳本執(zhí)行以下的命令，生成數(shù)據(jù)導(dǎo)出的腳本 3.執(zhí)行導(dǎo)出腳本 4.傳遞數(shù)據(jù)這里可以下載數(shù)據(jù)到本地進(jìn)行傳...