ZooKeeper集群搭建

摘要

0.0.1 基本介绍

• Zookeeper节点部署越多，服务的可靠性越高，建议部署奇数个节点，因为zookeeper集群是以宕机个数过半才会让整个集群宕机的。
• 需要给每个zookeeper 1G左右的内存，如果可能的话，最好有独立的磁盘，因为独立磁盘可以确保zookeeper是高性能的。如果你的集群负载很重，不要把zookeeper和RegionServer运行在同一台机器上面，就像DataNodes和TaskTrackers一样。

实验环境

Zookeeper运行需要java环境，需要安装jdk，注：每台服务器上面都需要安装zookeeper、jdk

0.0.2 安装openjdk

yum install java-1.8.0-openjdk
yum install java-1.8.0-openjdk-devel

0.0.3 安装Zookeeper

1、下载最新稳定版的 Zookeeper

wget https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.4.13/zookeeper-3.4.13.tar.gz

2、将下载的 ZooKeeper 解压

tar zxf zookeeper-3.4.13.tar.gz

3、将解压文件夹移动至/usr/local/zookeeper

mv zookeeper-3.4.13 /usr/local/zookeeper

4、进入zookeeper的conf目录下

cp zoo_sample.cfg zoo.cfg

5、创建相关目录，三台节点都需要

mkdir -p /usr/local/zookeeper/{logs,data}

0.0.4 Zookeeper集群配置

注意：搭建zookeeper集群时，一定要先停止已经启动的zookeeper节点。

0.0.4.1 修改配置文件

vi zoo.cfg

tickTime=2000
initLimit=10
syncLimit=5
dataLogDir=/usr/local/zookeeper/logs
dataDir=/usr/local/zookeeper/data
clientPort=2181
autopurge.snapRetainCount=500
autopurge.purgeInterval=24
server.1= 192.168.1.75:2888:3888
server.2= 192.168.1.76:2888:3888
server.3= 192.168.1.77:2888:3888

其余zookeeper节点安装完成之后，同步配置文件zoo.cfg。

0.0.4.2 配置参数说明

• tickTime 这个时间是作为zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是说每个tickTime时间就会发送一个心跳。
• initLimit 这个配置项是用来配置zookeeper接受客户端（这里所说的客户端不是用户连接zookeeper服务器的客户端,而是zookeeper服务器集群中连接到leader的follower 服务器）初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过10个心跳的时间（也就是tickTime）长度后 zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10*2000=20秒。
• syncLimit 这个配置项标识leader与follower之间发送消息,请求和应答时间长度,最长不能超过多少个tickTime的时间长度,总的时间长度就是5*2000=10秒。
• dataDir 顾名思义就是zookeeper保存数据的目录,默认情况下zookeeper将写数据的日志文件也保存在这个目录里；
• clientPort 这个端口就是客户端连接Zookeeper服务器的端口,Zookeeper会监听这个端口接受客户端的访问请求；
• server.A=B:C:D 中的A是一个数字,表示这个是第几号服务器,B是这个服务器的IP地址，C第一个端口用来集群成员的信息交换,表示这个服务器与集群中的leader服务器交换信息的端口，D是在leader挂掉时专门用来进行选举leader所用的端口。

0.0.4.3 创建ServerID标识

除了修改zoo.cfg配置文件外,zookeeper集群模式下还要配置一个myid文件,这个文件需要放在dataDir目录下。

这个文件里面有一个数据就是A的值（该A就是zoo.cfg文件中server.A=B:C:D中的A）,在zoo.cfg文件中配置的dataDir路径中创建myid文件。

在192.168.1.75服务器上面创建myid文件，并设置值为1，同时与zoo.cfg文件里面的server.1保持一致

echo "1" > /usr/local/zookeeper/data/myid

在192.168.1.76服务器上面创建myid文件，并设置值为1，同时与zoo.cfg文件里面的server.2保持一致，如下

echo "2" > /usr/local/zookeeper/data/myid

在192.168.1.77服务器上面创建myid文件，并设置值为1，同时与zoo.cfg文件里面的server.3保持一致，如下

echo "3" > /usr/local/zookeeper/data/myid

到此，相关配置已完成

0.0.4.4 Zookeeper集群查看

1、启动每个服务器上面的zookeeper节点

/usr/local/zookeeper/bin/zkServer.sh start

2、启动完成之后查看每个节点的状态

/usr/local/zookeeper/bin/zkServer.sh status