我是靠谱客的博主 尊敬天空,最近开发中收集的这篇文章主要介绍解决elasticsearch -在Hive external table 无法读取 date 字段,觉得挺不错的,现在分享给大家,希望可以做个参考。
概述
1.问题描述
对于@timestamp字段,在es中类型为date,创建hive外表时如果使用类型仍为date,操作时会报如下错误
Failed with exception java.io.IOException:org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.ClassCastException: org.apache.hadoop.hive.serde2.io.TimestampWritable cannot be cast to org.apache.hadoop.hive.serde2.io.DateWritable
2.解决办法
将date类型改为timestamp即可,例如:CREATE EXTERNAL TABLE ext3 (run_date timestamp) ROW FORMAT SERDE 'org.elasticsearch.hadoop.hive.EsSerDe' STORED BY 'org.elasticsearch.hadoop.hive.EsStorageHandler' TBLPROPERTIES('es.resource' = 'dfs/ext3', 'es.field.read.empty.as.null' = 'true','es.nodes'=);
参考:http://www.itkeyword.com/doc/6573413286728074561/unable-to-query-date-field-in-hive-external-table
https://www.iteblog.com/archives/892.html
最后
以上就是尊敬天空为你收集整理的解决elasticsearch -在Hive external table 无法读取 date 字段的全部内容,希望文章能够帮你解决解决elasticsearch -在Hive external table 无法读取 date 字段所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复