我是靠谱客的博主 清秀魔镜,最近开发中收集的这篇文章主要介绍Sqoop 启动任务时报错 java.lang.ClassNotFoundException: Class [表名] not found,觉得挺不错的,现在分享给大家,希望可以做个参考。
概述
class未找到是因为map是本地方式运行,生成的jar包在/tmp/sqoop-[username]目录下有两种解决方式
方式一
修改mapred运行方式,修改为伪分布方式
# 1.etc/hadoop/mapred-site.xml:
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
<property>
<name>mapreduce.admin.user.env</name>
<value>HADOOP_MAPRED_HOME=$HADOOP_COMMON_HOME</value>
</property>
<property>
<name>yarn.app.mapreduce.am.env</name>
<value>HADOOP_MAPRED_HOME=$HADOOP_COMMON_HOME</value>
</property>
</configuration>
# 2. etc/hadoop/yarn-site.xml
<configuration>
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
</configuration>
# 3. Start ResourceManager daemon and NodeManager daemon:
$ sbin/start-yarn.sh
方式二
在任务命令中增加–bindir参数
$sqoop import
--connect jdbc:mysql://localhost:3306/***
--username ****
--password ******
--table *****
--columns *
--target-dir /test
--delete-target-dir
--fields-terminated-by 't'
--bindir [SQOOP_NAME]/lib
最后
以上就是清秀魔镜为你收集整理的Sqoop 启动任务时报错 java.lang.ClassNotFoundException: Class [表名] not found的全部内容,希望文章能够帮你解决Sqoop 启动任务时报错 java.lang.ClassNotFoundException: Class [表名] not found所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复