我是靠谱客的博主 光亮小甜瓜,最近开发中收集的这篇文章主要介绍Kylin--安装依赖环境集群规划安装kylin-2.6.3-bin-hbase1x增加kylin依赖组件的配置配置kylin.sh配置conf/kylin.properties初始化kylin在hdfs上的数据路径启动集群,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

Kylin安装

  • 依赖环境
  • 集群规划
  • 安装kylin-2.6.3-bin-hbase1x
  • 增加kylin依赖组件的配置
  • 配置kylin.sh
  • 配置conf/kylin.properties
  • 初始化kylin在hdfs上的数据路径
  • 启动集群

依赖环境

软件版本
Apache hbase-1.1.1-bin.tar.gz1.1.1
spark-2.2.0-bin-2.6.0-cdh5.14.0.tgz2.2.0-bin-cdh5.14.0
apache-kylin-2.6.3-bin-hbase1x.tar.gz2.6.3

集群规划

主机名IP守护进程
node1192.168.88.120NameNode DataNode RunJar(Hive metastore) RunJar(Hive hiveserver2) QuorumPeerMain HMaster HRegionServer kylin NodeManager
node2192.168.88.121SecondaryNameNode JobHistoryServer DataNode HRegionServer QuorumPeerMain ResourceManager HistoryServer NodeManager
node3192.168.88.122HRegionServer NodeManager DataNode QuorumPeerMain
  • 注意:
    • kylin-2.6.3-bin-hbase1x所依赖的hbase为1.1.1版本
    • 要求hbase的hbase.zookeeper.quorum值必须只能是host1,host2,…。不允许出现host:2181,…

安装kylin-2.6.3-bin-hbase1x

## 解压apache-kylin-2.6.3-bin-hbase1x.tar.gz
tar -zxf /export/softwares/apache-kylin-2.6.3-bin-hbase1x.tar.gz -C /export/servers/

增加kylin依赖组件的配置

cd /export/servers/apache-kylin-2.6.3-bin-hbase1x/conf
ln -s $HADOOP_HOME/etc/hadoop/hdfs-site.xml hdfs-site.xml
ln -s $HADOOP_HOME/etc/hadoop/core-site.xml core-site.xml
ln -s $HBASE_HOME/conf/hbase-site.xml hbase-site.xml
ln -s $HIVE_HOME/conf/hive-site.xml hive-site.xml
ln -s $SPARK_HOME/conf/spark-defaults.conf spark-defaults.conf

配置kylin.sh

cd /export/servers/apache-kylin-2.6.3-bin-hbase1x/bin
vim kylin.sh
kylin.sh文件添加如下内容:

export HADOOP_HOME=/export/servers/hadoop-2.6.0-cdh5.14.0
export HIVE_HOME=/export/servers/hive-1.1.0-cdh5.14.0
export HBASE_HOME=/export/servers/hbase-1.1.1
export SPARK_HOME=/export/servers/spark-2.2.0-bin-hadoop2.6

配置conf/kylin.properties

  • 修改 Kylinkylin_配置文件:kylin.properties 中HDFS的路径,然后上传到 Linux的 Kylin/conf文件夹中

初始化kylin在hdfs上的数据路径

hadoop fs -mkdir -p /apps/kylin

启动集群

  • 1、启动zookeeper
  • 2、启动HDFS
  • 3、启动YARN集群
  • 4、启动HBase集群
  • 5、启动 metastore
nohup hive --service metastore &
  • 6、启动 hiverserver2
nohup hive --service hiveserver2 &
  • 7、启动Yarn history server
mr-jobhistory-daemon.sh start historyserver
  • 8、启动spark history server
sbin/start-history-server.sh 
  • 9、启动kylin
./kylin.sh start
  • 10、登录Kylin
http://node1:7070/kylin
urlhttp://IP:7070/kylin
默认用户名ADMIN
默认密码KYLIN
  • 用户名和密码都必须是大写

最后

以上就是光亮小甜瓜为你收集整理的Kylin--安装依赖环境集群规划安装kylin-2.6.3-bin-hbase1x增加kylin依赖组件的配置配置kylin.sh配置conf/kylin.properties初始化kylin在hdfs上的数据路径启动集群的全部内容,希望文章能够帮你解决Kylin--安装依赖环境集群规划安装kylin-2.6.3-bin-hbase1x增加kylin依赖组件的配置配置kylin.sh配置conf/kylin.properties初始化kylin在hdfs上的数据路径启动集群所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(53)

评论列表共有 0 条评论

立即
投稿
返回
顶部