我是靠谱客的博主 光亮小甜瓜,最近开发中收集的这篇文章主要介绍Kylin--安装依赖环境集群规划安装kylin-2.6.3-bin-hbase1x增加kylin依赖组件的配置配置kylin.sh配置conf/kylin.properties初始化kylin在hdfs上的数据路径启动集群,觉得挺不错的,现在分享给大家,希望可以做个参考。
概述
Kylin安装
- 依赖环境
- 集群规划
- 安装kylin-2.6.3-bin-hbase1x
- 增加kylin依赖组件的配置
- 配置kylin.sh
- 配置conf/kylin.properties
- 初始化kylin在hdfs上的数据路径
- 启动集群
依赖环境
软件 | 版本 |
---|---|
Apache hbase-1.1.1-bin.tar.gz | 1.1.1 |
spark-2.2.0-bin-2.6.0-cdh5.14.0.tgz | 2.2.0-bin-cdh5.14.0 |
apache-kylin-2.6.3-bin-hbase1x.tar.gz | 2.6.3 |
集群规划
主机名 | IP | 守护进程 |
---|---|---|
node1 | 192.168.88.120 | NameNode DataNode RunJar(Hive metastore) RunJar(Hive hiveserver2) QuorumPeerMain HMaster HRegionServer kylin NodeManager |
node2 | 192.168.88.121 | SecondaryNameNode JobHistoryServer DataNode HRegionServer QuorumPeerMain ResourceManager HistoryServer NodeManager |
node3 | 192.168.88.122 | HRegionServer NodeManager DataNode QuorumPeerMain |
- 注意:
- kylin-2.6.3-bin-hbase1x所依赖的hbase为1.1.1版本
- 要求hbase的hbase.zookeeper.quorum值必须只能是host1,host2,…。不允许出现host:2181,…
安装kylin-2.6.3-bin-hbase1x
## 解压apache-kylin-2.6.3-bin-hbase1x.tar.gz
tar -zxf /export/softwares/apache-kylin-2.6.3-bin-hbase1x.tar.gz -C /export/servers/
增加kylin依赖组件的配置
cd /export/servers/apache-kylin-2.6.3-bin-hbase1x/conf
ln -s $HADOOP_HOME/etc/hadoop/hdfs-site.xml hdfs-site.xml
ln -s $HADOOP_HOME/etc/hadoop/core-site.xml core-site.xml
ln -s $HBASE_HOME/conf/hbase-site.xml hbase-site.xml
ln -s $HIVE_HOME/conf/hive-site.xml hive-site.xml
ln -s $SPARK_HOME/conf/spark-defaults.conf spark-defaults.conf
配置kylin.sh
cd /export/servers/apache-kylin-2.6.3-bin-hbase1x/bin
vim kylin.sh
kylin.sh文件添加如下内容:
export HADOOP_HOME=/export/servers/hadoop-2.6.0-cdh5.14.0
export HIVE_HOME=/export/servers/hive-1.1.0-cdh5.14.0
export HBASE_HOME=/export/servers/hbase-1.1.1
export SPARK_HOME=/export/servers/spark-2.2.0-bin-hadoop2.6
配置conf/kylin.properties
- 修改 Kylinkylin_配置文件:kylin.properties 中HDFS的路径,然后上传到 Linux的 Kylin/conf文件夹中
初始化kylin在hdfs上的数据路径
hadoop fs -mkdir -p /apps/kylin
启动集群
- 1、启动zookeeper
- 2、启动HDFS
- 3、启动YARN集群
- 4、启动HBase集群
- 5、启动 metastore
nohup hive --service metastore &
- 6、启动 hiverserver2
nohup hive --service hiveserver2 &
- 7、启动Yarn history server
mr-jobhistory-daemon.sh start historyserver
- 8、启动spark history server
sbin/start-history-server.sh
- 9、启动kylin
./kylin.sh start
- 10、登录Kylin
http://node1:7070/kylin
url | http://IP:7070/kylin |
---|---|
默认用户名 | ADMIN |
默认密码 | KYLIN |
用户名和密码都必须是大写
最后
以上就是光亮小甜瓜为你收集整理的Kylin--安装依赖环境集群规划安装kylin-2.6.3-bin-hbase1x增加kylin依赖组件的配置配置kylin.sh配置conf/kylin.properties初始化kylin在hdfs上的数据路径启动集群的全部内容,希望文章能够帮你解决Kylin--安装依赖环境集群规划安装kylin-2.6.3-bin-hbase1x增加kylin依赖组件的配置配置kylin.sh配置conf/kylin.properties初始化kylin在hdfs上的数据路径启动集群所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复