欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

Zookeeper完全分布式集群的搭建

程序员文章站 2022-06-21 17:41:07
...

搭建zookeeper集群需要最少三台机器,需要安装jdk作为基础支持。此次使用的Zookeeper3.6.0版本。

1、准备虚拟机
准备三台虚拟机,将ip和端口规划好。这里最好将主机名,以及主机名和ip的映射关系配置好,配置此项关系可以参看Hadoop完全分布式集群搭建。

2、安装jdk
在虚拟机中安装jdk,并且配置jdk的环境变量。

3、搭建集群
1.下载安装包
下载zookeeper的安装包,下载地址:http://zookeeper.apache.org/
上传到linux集群环境下,规划自己的管理目录,解压安装包。

tar -zxvf apache-zookeeper-3.6.0-bin.tar.gz

2.集群配置
1>zoo.cfg
进入conf目录,复制zoo-sample.cfg重命名为zoo.cfg,通过修改zoo.cfg来对zookeeper进行配置。这个名字固定写死,因为zookeeper启动会检查这个文件,根据这个配置文件里的信息来启动服务。

cp zoo-sample.cfg zoo.cfg
vim zoo.cfg

此文件中需要修改以下两处:
dataDir:指定zookeeper将数据保存在哪个目录下,如果不修改,默认在/tmp下,这个目录下的数据有可能会在磁盘空间不足或服务器重启时自动被linux清理,所以一定要修改这个地址。按个人习惯将其修改为自己的管理目录。
完全分布式:多台机器各自配置。

server.1=xxx.xxx.xxx.xxx:2888:3888
server.2=xxx.xxx.xxx.xxx:2888:3888
server.3=xxx.xxx.xxx.xxx:2888:3888

在配置文件末尾加上这三行,ip填写自己规划的ip即可,zookeeper服务默认的端口号为2888和3888,也可将/etc/hosts文件添加主机和ip映射,将此处的ip写成主机名称。
说明:2888原子广播端口,3888选举端口,zookeeper有几个节点,就配置几个server。

如下文件,这里我使用的是主机名。 建议填写主机名。

Zookeeper完全分布式集群的搭建

2>myid
到之前配置的zookeeper数据文件所在的目录下生成一个文件叫myid,其中写上一个数字表明当前机器是哪一个编号的机器。

vim myid

注意:文件名称必须是myid,文件内容只需要一个数字即服务器列表中当前服务器的编号。

3.拷贝
将以上Zookeeper文件夹远程拷贝到另外两台服务器中:

scp -r apache-zookeeper-3.6.0-bin aaa@qq.com
scp -r apache-zookeeper-3.6.0-bin aaa@qq.com

然后修改另外两台服务器中的myid文件中的id即可。

#hadoop02

vim myid
2

#hadoop03

vim myid
3

4、启动zookeeper
启动zookeeper的各种命令操作如下,可以使用绝对路径操作这些命令,也可使用相对路径操作这些命令,相对路径需要进到zookeeper服务的bin目录进行操作。

#启动ZK服务: 
bin/zkServer.sh start
#停止ZK服务: 
bin/zkServer.sh stop
#重启ZK服务: 
bin/zkServer.sh restart
#查看ZK服务状态: 
bin/zkServer.sh status

Zookeeper集群需要每台挨个启动。

可以是用jps命令查看线程。

Zookeeper完全分布式集群的搭建
启动集群的时候,集群数量启动没有超过一半,状态会有错误提示,当集群启动数量超过一半就会自动转为正常状态,并且此台使集群进入正常工作状态的服务器会成为leader角色,集群中其他服务器的角色为fllower。
Zookeeper集群模式搭建到此完成。