Hive解決不同字段類型關聯(lián)數據劇增問題

問題介紹: hive兩張表關聯(lián)條件字段類型一個是string一個是bigint,關聯(lián)后發(fā)一個現象,就是所有長度比較小的數據關聯(lián)后正常結果,長度比較長的(比如示例中的18位)關聯(lián)后會發(fā)現數據量劇增。

解決辦法1--顯示轉換類型
將bigint轉換成string還是把string轉換成bigint后再做關聯(lián)都沒有問題

select t1.,t2. from ods_fund.fund_account_add t1 left join ods_fund.fund_account_add2 t2 on t1.data_id=cast(t2.data_id as string);
select t1.,t2. from ods_fund.fund_account_add t1 left join ods_fund.fund_account_add2 t2 on cast(t1.data_id as bigint)=t2.data_id;

解決辦法2--重建表

?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
【社區(qū)內容提示】社區(qū)部分內容疑似由AI輔助生成,瀏覽時請結合常識與多方信息審慎甄別。
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發(fā)布,文章內容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關閱讀更多精彩內容

友情鏈接更多精彩內容