hbase集群结构及集群搭建

65 阅读 0 评论 43 点赞

我是靠谱客的博主无情皮带，最近开发中收集的这篇文章主要介绍hbase集群结构及集群搭建，觉得挺不错的，现在分享给大家，希望可以做个参考。

概述

hbase集群结构

REGION：是HBASE中对表进行切割的单元
HMASTER：HBASE的主节点，负责整个集群的状态感知，负载分配、负责用户表的元数据管理
（可以配置多个用来实现HA）
REGION-SERVER：HBASE中真正负责管理region的服务器，也就是负责为客户端进行表数据读写的服务器
ZOOKEEPER:整个HBASE中的主从节点协调，主节点之间的选举，集群节点之间的上下线感知……都是通过zookeeper来实现
hbase集群搭建
----先部署一个zookeeper集群
（1）上传hbase安装包
（2）解压
（3）配置hbase集群，要修改3个文件
注意：要把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下

    （3.1）修改hbase-env.sh
    export JAVA_HOME=/usr/java/jdk1.7.0_55
    //告诉hbase使用外部的zk
    export HBASE_MANAGES_ZK=false
   
    （3.2）修改 hbase-site.xml
    <configuration>
            <!-- 指定hbase在HDFS上存储的路径 -->
    <property>
            <name>hbase.rootdir</name>
            <value>hdfs://ns1/hbase</value>
    </property>
            <!-- 指定hbase是分布式的 -->
    <property>
            <name>hbase.cluster.distributed</name>
            <value>true</value>
    </property>
            <!-- 指定zk的地址，多个用“,”分割 -->
    <property>
            <name>hbase.zookeeper.quorum</name>
            <value>weekend05:2181,weekend06:2181,weekend07:2181</value>
    </property>
    </configuration>

（3.3）修改 regionservers
weekend03
weekend04
weekend05
weekend06
(3.3) 修改 backup-masters来指定备用的主节点
[root@mini1 conf]# vi backup-masters
mini2
(3.4) 拷贝hbase到其他节点
scp -r /weekend/hbase-0.96.2-hadoop2/ weekend02:/weekend/
scp -r /weekend/hbase-0.96.2-hadoop2/ weekend03:/weekend/
scp -r /weekend/hbase-0.96.2-hadoop2/ weekend04:/weekend/
scp -r /weekend/hbase-0.96.2-hadoop2/ weekend05:/weekend/
scp -r /weekend/hbase-0.96.2-hadoop2/ weekend06:/weekend/
(4) 将配置好的HBase拷贝到每一个节点并同步时间。
(5) 启动所有的hbase进程
首先启动zk集群
./zkServer.sh start
启动hdfs集群
start-dfs.sh
启动hbase，在主节点上运行：
start-hbase.sh
(6) 通过浏览器访问hbase管理页面
192.168.1.201:60010
(7) 为保证集群的可靠性，要启动多个HMaster
hbase-daemon.sh start master