我是靠谱客的博主 魁梧黑猫,最近开发中收集的这篇文章主要介绍2.2、配置Spark-sql(连接Hive),觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

一、复制Hadoop目录下的hdfs-site.xml和Hive目录下的hive-site.xml到/usr/spark/spark-2.1.0/conf目录下

二、cp spark-env.sh.template spark-env.sh,编辑spark-env.sh文件添加如下内容:
export JAVA_HOME=/usr/java/jdk1.8.0_102
export CLASSPATH= CLASSPATH:/usr/hive/hive2.1.0/libexportHADOOPCONFDIR=/usr/hadoop/hadoop2.7.2/etc/hadoopexportHIVECONFDIR=/usr/hive/hive2.1.0/confexportSPARKCLASSPATH= SPARK_CLASSPATH:/usr/hive/hive-2.1.0/lib/mysql-connector-java-5.1.38-bin.jar

最后

以上就是魁梧黑猫为你收集整理的2.2、配置Spark-sql(连接Hive)的全部内容,希望文章能够帮你解决2.2、配置Spark-sql(连接Hive)所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(54)

评论列表共有 0 条评论

立即
投稿
返回
顶部