我是靠谱客的博主 感动大象,最近开发中收集的这篇文章主要介绍sqoop【一】安装及环境配置sqoop简介安装,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

sqoop安装

  • sqoop简介
  • 安装

sqoop简介

Sqoop是一个用于在Hadoop和关系数据库之间传输的工具

  • 将数据从RDBMS导入到HDFS
    HDFS、Hive、HBase
  • 从HDFS导出数据到RDBMS
  • 使用MapReduce导入和导出数据,提供并行操作和容错

安装

版本1.4.6 资源提供 https://pan.baidu.com/s/1WrvtO_Wl2K_PpF0HLIAQGQ

提取码:ns9m

安装及环境配置步骤:

  1. 拷贝jar包到安装的sqoop目录下的lib中,如下:
    mysql-connector-java
    hadoop-common-2.6.0-cdh5.14.2.jar
    hadoop-hdfs-2.6.0-cdh5.14.2
    hadoop-mapreduce-client-core-2.6.0-cdh5.14.2.jar
[root@jzy1 opt]# cp mysql-connector-java-5.1.38.jar soft/sqoop146/lib/
[root@jzy1 opt]# cp soft/hadoop260/share/hadoop/common/hadoop-common-2.6.0-cdh5.14.2.jar soft/sqoop146/lib/
[root@jzy1 opt]# cp soft/hadoop260/share/hadoop/hdfs/hadoop-hdfs-2.6.0-cdh5.14.2.jar soft/sqoop146/lib/
[root@jzy1 opt]# cp soft/hadoop260/share/hadoop/mapreduce/hadoop-mapreduce-client-core-2.6.0-cdh5.14.2.jar soft/sqoop146/lib/


## hive应用
cp /opt/soft/hive110/lib/hive-common-1.1.0-cdh5.14.2.jar /opt/soft/sqoop146/lib/
cp /opt/soft/hive110/lib/hive-shims* /opt/soft/sqoop146/lib/

下载json jar包放置lib目录下
链接:https://pan.baidu.com/s/1FUfp0_rrvuhhf8V3–YCMQ
提取码:45xd
在这里插入图片描述

  1. 配置sqoop-env.sh文件
[root@jzy1 conf]# cp sqoop-env-template.sh sqoop-env.sh
[root@jzy1 conf]# vi sqoop-env.sh

在这里插入图片描述

  1. 配置环境
    vi /etc/profile
    在文档末添加如下内容
    保存并激活 source /etc/profile
    在这里插入图片描述

最后

以上就是感动大象为你收集整理的sqoop【一】安装及环境配置sqoop简介安装的全部内容,希望文章能够帮你解决sqoop【一】安装及环境配置sqoop简介安装所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(67)

评论列表共有 0 条评论

立即
投稿
返回
顶部