datax從hive往es中導數(shù)報錯:One or more of the items in the Bulk request failed, check BulkResult.getItems...

背景:公司數(shù)據(jù)涉及到從hive往es中導數(shù),使用datax來進行抽取

  1. 報錯:One or more of the items in the Bulk request failed, check BulkResult.getItems() for more information
  2. 推測:
  • 報錯的數(shù)據(jù),該字段內容都很長
  • es中該字段使用的是keyword類型,推測可能是超過keyword類型范圍
  • 使用 text 進行存儲
  1. 使用 text 存儲,導數(shù)成功
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
【社區(qū)內容提示】社區(qū)部分內容疑似由AI輔助生成,瀏覽時請結合常識與多方信息審慎甄別。
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發(fā)布,文章內容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關閱讀更多精彩內容

  • 為什么用elasticsearch 在引入elasticsearch前,我們的數(shù)據(jù)一般都存儲在mysql上,所有的...
    遞歸宇宙閱讀 1,223評論 0 0
  • 一、開場白 1、哪些人需要學習ES 開發(fā) 測試 運維 利用數(shù)據(jù)來分析和查詢的人 作為一個非關系型數(shù)據(jù)庫,有著和my...
    天草二十六_簡村人閱讀 4,705評論 1 1
  • 原文鏈接:Django筆記四十一之Django中使用es[https://mp.weixin.qq.com/s/4...
    vv安的淺唱閱讀 390評論 0 3
  • 一、基本屬性介紹 1.包含搜索和聚合兩大功能 2.天生分布式結構,支持水平擴展,可以是多個節(jié)點甚至是幾百個節(jié)點 3...
    布魯_boy閱讀 4,647評論 1 1
  • 1、Hive表關聯(lián)查詢,如何解決數(shù)據(jù)傾斜的問題?(☆☆☆☆☆) 1)傾斜原因: map輸出數(shù)據(jù)按key Hash的...
    陳二狗想吃肉閱讀 263評論 0 0

友情鏈接更多精彩內容