• 使用帮助

Sqoop help 查看所有的sqoop的帮助

Sqoop help import 查看import命令的帮助

Eg: sqoop导入到HDFS的一个简单示例:

sqoop import 

        --connect jdbc:mysql://192.168.56.121:3306/metastore 

        --username hiveuser 

        --password redhat 

        --table TBLS

• 导入到HDFS

Eg:

sqoop import 

--connect jdbc:mysql://192.168.56.121:3306/metastore 

--username hiveuser 

--password redhat 

--table TBLS 

--target-dir /user/hive/result

注意:

•  mysql jdbc url 请使用 ip 地址
• 如果重复执行，会提示目录已经存在，可以手动删除
• 如果不指定 --target-dir，导入到用户家目录下的 TBLS 目录

其他参数说明

2.3 创建 hive 表

Eg:

sqoop 

        create-hive-table 

        --connect jdbc:mysql://192.168.56.121:3306/metastore 

        --username hiveuser 

        --password redhat 

        --table TBLS 

导入数据到 hive

执行下面的命令会将 mysql 中的数据导入到 hdfs 中，然后创建一个hive 表，最后再将 hdfs 上的文件移动到 hive 表的目录下面。

sqoop import 

        --connect jdbc:mysql://192.168.56.121:3306/metastore 

        --username hiveuser --password redhat 

        --table TBLS 

        --fields-terminated-by "t" 

        --lines-terminated-by "n" 

        --hive-import 

        --hive-overwrite 

        --create-hive-table 

        --hive-table dw_srclog.TBLS 

        --delete-target-dir

具体可以参照:https://segmentfault.com/a/1190000002532293

关于sqoop的导出使用从hive中导出到mysql:

Sqoop export

--connect jdbc:mysql://xxxxxx:3306/bbg_real_data?characterEncoding=utf-8

--username root  #表示数据库用户名

--password root  #表示数据库密码

--table deal_data  #表示数据表名

--hcatalog-database default  #hive中的数据库名

--hcatalog-table deal_bbg_data_2  #表示hive中的表名

注意导出的时候，mysql的字段名要和hive里面的字段名一样，这样才能对应的导入和导出。字段类型也要一样，我全部都是varchar(40)。

Mysql表明和字段名不能是关键字例如:all等等

Hive tutorrials

1. Create schema/table

Create schema[table] schema_name/table_name

1. Delete schema/table

Drop  database[table] if exists database_name[table_name] 

Detail please look at as follow:

http://www.yiibai.com/hive/hive_drop_table.html

最后

以上就是忧虑月饼为你收集整理的Sqoop 导入数据到hdfs和hive总结 2.3 创建 hive 表导入数据到 hive的全部内容，希望文章能够帮你解决Sqoop 导入数据到hdfs和hive总结 2.3 创建 hive 表导入数据到 hive所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。