我是靠谱客的博主 缓慢香菇,最近开发中收集的这篇文章主要介绍ETL工具Kettle研究-3-MySQL数据导入HIVE前言1.数据库配置2.远程Kettle连接配置,觉得挺不错的,现在分享给大家,希望可以做个参考。
概述
前言
.从数据库(mysql)中读取数据写入HDFS并建hive表。
在该转换中,需要配置2个DB链接(Mysql和HiveServer2),配置Hadoop集群(HDFS),配置子服务器(远程执行服务器)。
本实践的元数据文件:mysql-to-hive.ktr
1.数据库配置
主对象树->DB连接->新建->一般->Mysql->设置(填写数据库信息)
注意:在执行测试连接之前先把驱动jar放入${KETTLE_HOME}/data-integrationlib下,否则会报无法找到Driver的错误。
2.远程Kettle连接配置
主对象树->子服务器->新建->服务(填写远程kettle服务端相关信息)
最后
以上就是缓慢香菇为你收集整理的ETL工具Kettle研究-3-MySQL数据导入HIVE前言1.数据库配置2.远程Kettle连接配置的全部内容,希望文章能够帮你解决ETL工具Kettle研究-3-MySQL数据导入HIVE前言1.数据库配置2.远程Kettle连接配置所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复