hbase完全分布式安装教程
程序员文章站
2022-05-11 09:55:05
1.Hbase体系结构及集群规划
体系结构
a.Zookeeper
Zookeeper Quorum中除了存储了-ROOT-表的地址和HMaster的地址,HRegionServer...
1.Hbase体系结构及集群规划
体系结构
a.ZookeeperZookeeper Quorum中除了存储了-ROOT-表的地址和HMaster的地址,HRegionServer也会把自己以Ephemeral方式注册到Zookeeper中,使得HMaster可以随时感知到各个HRegionServer的健康状态。此外,Zookeeper也避免了HMaster的单点问题。
b.HBase Master每台HRegion服务器都会和HMaster服务器通信,HMaster的主要任务就是要告诉每台HRegion服务器它要维护哪些HRegion。 当一台新的HRegion服务器登录到HMaster服务器时,HMaster会告诉它先等待分配数据。而当一台HRegion死机时,HMaster会把它负责的HRegion标记为未分配,然后再把它们分配到其他HRegion服务器中。
c.HRegionServerHRegionServer主要负责响应用户I/O请求,向HDFS文件系统中读写数据,是HBase中最核心的模块。
集群规划
2.修改配置文件 hbase-env.sh
配置jdk
export JAVA_HOME=[本机JAVA_HOME]
使用独立的Zookeeper
export HBASE_MANAGES_ZK=false
3.配置hbase-site.xml
hbase.rootdir hdfs://bigdata-pro01.kfk.com:9000/hbase hbase.cluster.distributed true hbase.zookeeper.quorum bigdata-pro01.kfk.com,bigdata-pro02.kfk.com, bigdata-pro03.kfk.com
注意对应的主机名
4.配置regionservers
bigdata-pro01.kfk.com bigdata-pro02.kfk.com bigdata-pro03.kfk.com
5.将hbase配置文件分发的其余所有节点
scp -r hbase-0.98.6-cdh5.3.0 bigdata-pro02.kfk.com:/opt/modules/ scp -r hbase-0.98.6-cdh5.3.0 bigdata-pro03.kfk.com:/opt/modules/
6.启动Hbase
1)各个节点启动ZookeeperzkServer.sh start2)主节点启动HDFS
bin/start-dfs.sh3)启动HBase
进入到hbase安装目录中的bin目录下
bin/start-hbase.sh4)查看HBase Web界面
访问:注意主机地址映射
bigdata-pro01.kfk.com:60010/