datax從hive往es中導(dǎo)數(shù)報錯:One or more of the items in the Bulk request failed, check BulkResult.getItems...

背景:公司數(shù)據(jù)涉及到從hive往es中導(dǎo)數(shù),使用datax來進行抽取

  1. 報錯:One or more of the items in the Bulk request failed, check BulkResult.getItems() for more information
  2. 推測:
  • 報錯的數(shù)據(jù),該字段內(nèi)容都很長
  • es中該字段使用的是keyword類型,推測可能是超過keyword類型范圍
  • 使用 text 進行存儲
  1. 使用 text 存儲,導(dǎo)數(shù)成功
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 為什么用elasticsearch 在引入elasticsearch前,我們的數(shù)據(jù)一般都存儲在mysql上,所有的...
    遞歸宇宙閱讀 1,209評論 0 0
  • 一、開場白 1、哪些人需要學(xué)習(xí)ES 開發(fā) 測試 運維 利用數(shù)據(jù)來分析和查詢的人 作為一個非關(guān)系型數(shù)據(jù)庫,有著和my...
    天草二十六_簡村人閱讀 4,652評論 1 1
  • 原文鏈接:Django筆記四十一之Django中使用es[https://mp.weixin.qq.com/s/4...
    vv安的淺唱閱讀 376評論 0 3
  • 一、基本屬性介紹 1.包含搜索和聚合兩大功能 2.天生分布式結(jié)構(gòu),支持水平擴展,可以是多個節(jié)點甚至是幾百個節(jié)點 3...
    布魯_boy閱讀 4,623評論 1 1
  • 1、Hive表關(guān)聯(lián)查詢,如何解決數(shù)據(jù)傾斜的問題?(☆☆☆☆☆) 1)傾斜原因: map輸出數(shù)據(jù)按key Hash的...
    陳二狗想吃肉閱讀 256評論 0 0

友情鏈接更多精彩內(nèi)容