我是靠谱客的博主 尊敬天空,最近开发中收集的这篇文章主要介绍解决elasticsearch -在Hive external table 无法读取 date 字段,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

1.问题描述

   对于@timestamp字段,在es中类型为date,创建hive外表时如果使用类型仍为date,操作时会报如下错误

 Failed with exception java.io.IOException:org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.ClassCastException: org.apache.hadoop.hive.serde2.io.TimestampWritable cannot be cast to org.apache.hadoop.hive.serde2.io.DateWritable

  

2.解决办法

 将date类型改为timestamp即可,例如:
 CREATE EXTERNAL TABLE ext3 (run_date timestamp) ROW FORMAT SERDE 'org.elasticsearch.hadoop.hive.EsSerDe' STORED BY 'org.elasticsearch.hadoop.hive.EsStorageHandler' TBLPROPERTIES('es.resource' = 'dfs/ext3', 'es.field.read.empty.as.null' = 'true','es.nodes'=);

  

 参考:http://www.itkeyword.com/doc/6573413286728074561/unable-to-query-date-field-in-hive-external-table

             https://www.iteblog.com/archives/892.html

最后

以上就是尊敬天空为你收集整理的解决elasticsearch -在Hive external table 无法读取 date 字段的全部内容,希望文章能够帮你解决解决elasticsearch -在Hive external table 无法读取 date 字段所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(60)

评论列表共有 0 条评论

立即
投稿
返回
顶部