我是靠谱客的博主 花痴玉米,最近开发中收集的这篇文章主要介绍大数据集群搭建(六)——Hive-3.1.2安装Hive-3.1.2安装,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

Hive-3.1.2安装

  1. Hive安装采用多用户模式,有服务端和客户端
节点Hive服务端Hive客户端mysql管理原数据
nn1
nn2
dn1
  1. 下载Hive压缩包-华中科技大学镜像
  2. 将文件上传到nn1节点~/pkg目录下
  3. 执行以下命令,在nn1安装Hive
#解压到/opt目录
 tar -zxvf ~/pkg/apache-hive-3.1.2-bin.tar.gz -C /opt/

#创建Hive的软连接
cd /opt
ln -s ./apache-hive-3.1.2-bin/ hive

#发送到dn1节点
scp -r ./hive/ dn1:`pwd`

#在nn1和dn1节点上配置Hive环境变量
vim /etc/profile

#在末尾增加以下内容,然后保存
export HIVE_HOME=/opt/hive
export PATH=$PATH:$HIVE_HOME/bin

#在nn1和dn1节点上使配置生效
source /etc/profile

#在nn1及dn1节点创建/opt/hive/conf/hive-site.xml
cp /opt/hive/conf/hive-default.xml.template /opt/hive/conf/hive-site.xml

#修改nn1的hive-site.xml为以下内容
#注意mysql8.0的JDBC驱动由com.mysql.jdbc.Driver变成了com.mysql.cj.jdbc.Driver
<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
 <property>
  <name>hive.metastore.warehouse.dir</name>
  <value>/user/hive/warehouse</value>
 </property>
 <property>
  <name>javax.jdo.option.ConnectionURL</name>
  <value>jdbc:mysql://nn2:3306/hive?createDatabaseIfNotExist=true</value>
 </property>
 <property>
  <name>javax.jdo.option.ConnectionDriverName</name>
  <value>com.mysql.cj.jdbc.Driver</value>
 </property>
 <property>
  <name>javax.jdo.option.ConnectionUserName</name>
  <value>root</value>
 </property>
 <property>
  <name>javax.jdo.option.ConnectionPassword</name>
  <value>123456</value>
 </property>
</configuration>

#修改dn1的hive-site.xml为以下内容
<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
 <property>
  <name>hive.metastore.warehouse.dir</name>
  <value>/user/hive/warehouse</value>
 </property>
 <property>
  <name>hive.metastore.local</name>
  <value>false</value>
 </property>
 <property>
  <name>hive.metastore.uris</name>
  <value>thrift://dn1:9083</value>
 </property>
</configuration>
  1. 下载mysql-connector-java-8.0.19.jar
  2. 选择“Platform Independent”,点击第一个“Download”
    在这里插入图片描述
  3. 点击下面的“No thanks,just start my download”
    在这里插入图片描述
  4. 解压压缩包,得到“mysql-connector-java-8.0.19.jar”
    在这里插入图片描述
  5. 上传到nn1的/opt/hive/lib目录下
  6. 进行初始化
schematool -dbType mysql -initSchema
  1. 发现报错
    在这里插入图片描述
  2. 问题解决:由于jar包版本不一致,将nn1节点/opt/hive/lib路径下的guava-19.0.jar替换成/opt/hadoop/share/hadoop/common/lib下的guava-27.0-jre.jar即可
  3. 再次初始化,成功
    在这里插入图片描述
  4. 启动hive
    在这里插入图片描述
  5. 对nn1、nn2和dn1节点进行快照

最后

以上就是花痴玉米为你收集整理的大数据集群搭建(六)——Hive-3.1.2安装Hive-3.1.2安装的全部内容,希望文章能够帮你解决大数据集群搭建(六)——Hive-3.1.2安装Hive-3.1.2安装所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(48)

评论列表共有 0 条评论

立即
投稿
返回
顶部