概述
sqoop安装
- sqoop简介
- 安装
sqoop简介
Sqoop是一个用于在Hadoop和关系数据库之间传输的工具
- 将数据从RDBMS导入到HDFS
HDFS、Hive、HBase - 从HDFS导出数据到RDBMS
- 使用MapReduce导入和导出数据,提供并行操作和容错
安装
版本1.4.6 资源提供 https://pan.baidu.com/s/1WrvtO_Wl2K_PpF0HLIAQGQ
提取码:ns9m
安装及环境配置步骤:
- 拷贝jar包到安装的sqoop目录下的lib中,如下:
mysql-connector-java
hadoop-common-2.6.0-cdh5.14.2.jar
hadoop-hdfs-2.6.0-cdh5.14.2
hadoop-mapreduce-client-core-2.6.0-cdh5.14.2.jar
[root@jzy1 opt]# cp mysql-connector-java-5.1.38.jar soft/sqoop146/lib/
[root@jzy1 opt]# cp soft/hadoop260/share/hadoop/common/hadoop-common-2.6.0-cdh5.14.2.jar soft/sqoop146/lib/
[root@jzy1 opt]# cp soft/hadoop260/share/hadoop/hdfs/hadoop-hdfs-2.6.0-cdh5.14.2.jar soft/sqoop146/lib/
[root@jzy1 opt]# cp soft/hadoop260/share/hadoop/mapreduce/hadoop-mapreduce-client-core-2.6.0-cdh5.14.2.jar soft/sqoop146/lib/
## hive应用
cp /opt/soft/hive110/lib/hive-common-1.1.0-cdh5.14.2.jar /opt/soft/sqoop146/lib/
cp /opt/soft/hive110/lib/hive-shims* /opt/soft/sqoop146/lib/
下载json jar包放置lib目录下
链接:https://pan.baidu.com/s/1FUfp0_rrvuhhf8V3–YCMQ
提取码:45xd
- 配置sqoop-env.sh文件
[root@jzy1 conf]# cp sqoop-env-template.sh sqoop-env.sh
[root@jzy1 conf]# vi sqoop-env.sh
- 配置环境
vi /etc/profile
在文档末添加如下内容
保存并激活source /etc/profile
最后
以上就是感动大象为你收集整理的sqoop【一】安装及环境配置sqoop简介安装的全部内容,希望文章能够帮你解决sqoop【一】安装及环境配置sqoop简介安装所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复