hive基本操作之二

1.查找數(shù)據(jù)到本地

?????? insert overwrite local directory '/home/mydir/mydir' select ....

2.增加動態(tài)分區(qū)

????? set?hive.exec.hynamic.partition=true;?? -- 開啟動態(tài)分區(qū)

????? set?hive.exec.dynamic.partition.mode=nonstrict;? -- 設(shè)置為非嚴(yán)格模式

?????? 注:這個屬性默認(rèn)是strict,即限制模式,strict是避免全分區(qū)字段是動態(tài)的,必須至少一個分區(qū)字段是指定有值即靜態(tài)的,且必須放在最前面。設(shè)置為nonstrict之后所有的分區(qū)都可以是動態(tài)的了。

?????? set?hive.exec.max.dynamic.partitions.pernode=10000; ? --默認(rèn)100,這個屬性表示每個節(jié)點生成動態(tài)分區(qū)的最大個數(shù)

? ? ? ? set?hive.exec.max.dynamic.partitions=100000;??? --這個屬性表示一個DML操作可以創(chuàng)建的最大動態(tài)分區(qū)數(shù),默認(rèn)是1000

????? set?hive.exec.max.created.files=150000 ;??? -- 這個屬性表示一個DML操作可以創(chuàng)建的最大文件數(shù),默認(rèn)是10000

3.explain查看hql執(zhí)行的stage分布與抽象語法樹

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容