我是靠谱客的博主 繁荣小海豚,最近开发中收集的这篇文章主要介绍sqoop的安装步骤,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

安装准备:
jdk
mysql
hdfs
hive
安装节点:
sqoop只需要一个节点
这个节点的要求:
能够访问到 hadoop hive hbase
sqoop安装节点 必须安装 hadoop hive hbase
sqoop 只能安装hive所在节点了
hdp03

安装版本:
sqoop1 sqoop1.4… sqoop1.4.7
sqoop2 sqoop1.99…

选择 1.4.6

安装步骤:
1)上传
2)解压
tar -xvzf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz
3)配置环境变量
ln -s sqoop-1.4.6.bin__hadoop-2.0.4-alpha sqoop
export SQOOP_HOME=/home/hadoop/apps/sqoop
export PATH= P A T H : PATH: PATH:SQOOP_HOME/bin

source /etc/profile 
验证  sqoop version 

4)修改sqoop的配置文件
/home/hadoop/apps/sqoop/conf
mv sqoop-env-template.sh sqoop-env.sh
#配置hadoop的安装目录
export HADOOP_COMMON_HOME=/home/hadoop/apps/hadoop-2.7.7

#配置的hadoop的mr的安装目录
export HADOOP_MAPRED_HOME=/home/hadoop/apps/hadoop-2.7.7

#set the path to where bin/hbase is available
#export HBASE_HOME=

#配置hive的安装目录
export HIVE_HOME=

#设置 zookeeper的配置文件目录
export ZOOCFGDIR=/home/hadoop/apps/zookeeper-3.4.10/conf

5)将mysql的驱动包 放在sqoop的安装目录的lib下
/home/hadoop/apps/sqoop/lib
到此为止安装完成

最后

以上就是繁荣小海豚为你收集整理的sqoop的安装步骤的全部内容,希望文章能够帮你解决sqoop的安装步骤所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(73)

评论列表共有 0 条评论

立即
投稿
返回
顶部