概述
1. 我的hadoop的版本是1.1.2,对应的sqoop是sqoop-1.4.4.bin__hadoop-1.0.0,sqoop-1.4.4.bin__hadoop-1.0.0的下载地址:
http://www.apache.org/dyn/closer.cgi/sqoop/
我选的是其中的ttp://mirrors.hust.edu.cn/apache/sqoop/,选择1.4.4版本下的sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz
2. 解压sqoop安装文件,修改conf/sqoop-env.sh
#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/usr/hadoop-1.1.2/
#Set path to where hadoop-*-core.jar is available
export HADOOP_MAPRED_HOME=/usr/hadoop-1.1.2
#set the path to where bin/hbase is available
export HBASE_HOME=/usr/hbase-0.94.13
3. 复制sqoop-site-template.xml,命名为sqoop-site.xml,内容不变
4. 下载myql-connector-java-5.0.8.jar,放到@SQOOP_HOME/lib中
5. 下载并安装Mysql,在命令行中输入
> yum install mysql
mysql默认用户名是root,密码为空
我安装完mysql后,在命令行中输入mysql -u root,报错了,后来网上查资料,输入如下命令:
>service mysql start
>mysql -u root
显示mysql启动成功
6. 从MySQL导入数据到HDFS
在mysql中创建数据库,名为sqoop,旗下有个表叫student,表结构为id int,name text
测试sqoop与mysql的连接:>bin/sqoop list-database --connect jdbc:mysql://localhost:3306/ --username root
从mysql导入数据到HDFS:>sqoop import --connect jdbc:mysql://localhost:3306/ sqoop --usernaem root --table student -m 1
7. 在HDFS上查看数据是否导入
>hadoop dfs -ls student
最后
以上就是魁梧航空为你收集整理的CentOS下sqoop1.4.4的安装的全部内容,希望文章能够帮你解决CentOS下sqoop1.4.4的安装所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
发表评论 取消回复