欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  科技

hbase完全分布式安装教程

程序员文章站 2022-09-28 17:51:05
1.Hbase体系结构及集群规划 体系结构 a.Zookeeper Zookeeper Quorum中除了存储了-ROOT-表的地址和HMaster的地址,HRegionServer...

1.Hbase体系结构及集群规划

体系结构

hbase完全分布式安装教程

a.Zookeeper

Zookeeper Quorum中除了存储了-ROOT-表的地址和HMaster的地址,HRegionServer也会把自己以Ephemeral方式注册到Zookeeper中,使得HMaster可以随时感知到各个HRegionServer的健康状态。此外,Zookeeper也避免了HMaster的单点问题。

b.HBase Master

每台HRegion服务器都会和HMaster服务器通信,HMaster的主要任务就是要告诉每台HRegion服务器它要维护哪些HRegion。   当一台新的HRegion服务器登录到HMaster服务器时,HMaster会告诉它先等待分配数据。而当一台HRegion死机时,HMaster会把它负责的HRegion标记为未分配,然后再把它们分配到其他HRegion服务器中。

c.HRegionServer

HRegionServer主要负责响应用户I/O请求,向HDFS文件系统中读写数据,是HBase中最核心的模块。

集群规划

hbase完全分布式安装教程

2.修改配置文件 hbase-env.sh

配置jdk

export JAVA_HOME=[本机JAVA_HOME]

使用独立的Zookeeper

export HBASE_MANAGES_ZK=false

3.配置hbase-site.xml


    
            hbase.rootdir
            hdfs://bigdata-pro01.kfk.com:9000/hbase
    
            hbase.cluster.distributed
            true
    
        hbase.zookeeper.quorum
        bigdata-pro01.kfk.com,bigdata-pro02.kfk.com,
            bigdata-pro03.kfk.com
    

注意对应的主机名

4.配置regionservers

bigdata-pro01.kfk.com
bigdata-pro02.kfk.com
bigdata-pro03.kfk.com

5.将hbase配置文件分发的其余所有节点

scp -r hbase-0.98.6-cdh5.3.0 bigdata-pro02.kfk.com:/opt/modules/
scp -r hbase-0.98.6-cdh5.3.0 bigdata-pro03.kfk.com:/opt/modules/

6.启动Hbase

1)各个节点启动Zookeeper
zkServer.sh start
2)主节点启动HDFS
bin/start-dfs.sh
3)启动HBase
进入到hbase安装目录中的bin目录下
bin/start-hbase.sh
4)查看HBase Web界面

访问:注意主机地址映射

bigdata-pro01.kfk.com:60010/

hbase完全分布式安装教程