hbase集群结构及集群搭建

时间:2019-04-15
本文章向大家介绍hbase集群结构及集群搭建,主要包括hbase集群结构及集群搭建使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。

hbase集群结构

REGION:是HBASE中对表进行切割的单元
HMASTER:HBASE的主节点,负责整个集群的状态感知,负载分配、负责用户表的元数据管理
(可以配置多个用来实现HA)
REGION-SERVER:HBASE中真正负责管理region的服务器,也就是负责为客户端进行表数据读写的服务器
ZOOKEEPER:整个HBASE中的主从节点协调,主节点之间的选举,集群节点之间的上下线感知……都是通过zookeeper来实现
hbase集群搭建
----先部署一个zookeeper集群
(1)上传hbase安装包
(2)解压
(3)配置hbase集群,要修改3个文件
注意:要把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下

    (3.1)修改hbase-env.sh
    export JAVA_HOME=/usr/java/jdk1.7.0_55
    //告诉hbase使用外部的zk
    export HBASE_MANAGES_ZK=false
   
    (3.2)修改 hbase-site.xml
    <configuration>
            <!-- 指定hbase在HDFS上存储的路径 -->
    <property>
            <name>hbase.rootdir</name>
            <value>hdfs://ns1/hbase</value>
    </property>
            <!-- 指定hbase是分布式的 -->
    <property>
            <name>hbase.cluster.distributed</name>
            <value>true</value>
    </property>
            <!-- 指定zk的地址,多个用“,”分割 -->
    <property>
            <name>hbase.zookeeper.quorum</name>
            <value>weekend05:2181,weekend06:2181,weekend07:2181</value>
    </property>
    </configuration>

(3.3)修改 regionservers
weekend03
weekend04
weekend05
weekend06
(3.3) 修改 backup-masters来指定备用的主节点
[root@mini1 conf]# vi backup-masters
mini2
(3.4) 拷贝hbase到其他节点
scp -r /weekend/hbase-0.96.2-hadoop2/ weekend02:/weekend/
scp -r /weekend/hbase-0.96.2-hadoop2/ weekend03:/weekend/
scp -r /weekend/hbase-0.96.2-hadoop2/ weekend04:/weekend/
scp -r /weekend/hbase-0.96.2-hadoop2/ weekend05:/weekend/
scp -r /weekend/hbase-0.96.2-hadoop2/ weekend06:/weekend/
(4) 将配置好的HBase拷贝到每一个节点并同步时间。
(5) 启动所有的hbase进程
首先启动zk集群
./zkServer.sh start
启动hdfs集群
start-dfs.sh
启动hbase,在主节点上运行:
start-hbase.sh
(6) 通过浏览器访问hbase管理页面
192.168.1.201:60010
(7) 为保证集群的可靠性,要启动多个HMaster
hbase-daemon.sh start master