如何在hive sql中如用select id, name,age where age=20 在mongodb端進(jìn)行過(guò)濾查詢? 目前必須取消謂詞下推才能正常執(zhí)行,不然會(huì)報(bào)錯(cuò) ,但取消謂詞下推會(huì)把mongodb表所有的數(shù)據(jù)加載的hive表,這樣是在hive端進(jìn)行過(guò)濾的
MongoDB數(shù)據(jù)增量同步到Hive(方案一通過(guò)BSON文件映射)一、背景 隨著monggo中數(shù)據(jù)量越來(lái)越大,全量同步到數(shù)倉(cāng),已不太現(xiàn)實(shí),考慮增量同步的方式,我們?cè)谔剿髟隽客降倪^(guò)程中,方案不斷在改進(jìn)優(yōu)化,這里記錄一下我們mongo增量同步...