Zookeeper简介及单机、集群模式搭建

1、zookeeper简介

一个开源的分布式的，为分布式应用提供协调服务的apache项目。

提供一个简单的原语集合，以便于分布式应用可以在它之上构建更高层次的同步服务。

设计非常易于编程，它使用的是类似于文件系统那样的树形数据结构。

目的就是将分布式服务不再需要由于协调冲突而另外实现协作服务。

2、zookeeper角色介绍

Leader：负责进行投票发起和决议，更新系统状态。

Learner：

Follower：用于接收客户端请求并向客户端返回结果，在选主过程中参数投票。

Observer：可以接收客户端连接，将写请求转发给leader节点，但是observer不参加投票过程，只同步leader的状态。Observer的目的是为了扩展系统，提高读取速度。

Client：请求发起端

3、zookeeper应用场景

Zookeeper从设计模式角度来看，是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据状态发生变化，zookeeper就将负责通知已经在zookeeper上注册的那些观察者做出相应的反应，从而实现集群中类似master/slaves管理模式。

应用场景：

统一命名服务

配置管理

集群管理

贡享锁/同步锁

4、zookeeper的安装

1）zookeeper单机模式安装

安装zkserver：

$ tar -zxvf zookeeper-3.4.5.tar.gz -C /usr/local/

$ chown -R hadoop:hadoop zookeeper-3.4.5/

$ cp zoo_sample.cfg  zoo.cfg

$vi zoo.cfg     --添加以下语句

dataDir=/usr/local/zookeeper-3.4.5/data/

启动zkserver：

$ bin/zkServer.sh start

JMX enabled by default

Using config: /usr/local/zookeeper-3.4.5/bin/../conf/zoo.cfg

Starting zookeeper ... STARTED

$ jps

55039 QuorumPeerMain

55058 Jps

$ bin/zkServer.sh status

JMX enabled by default

Using config: /usr/local/zookeeper-3.4.5/bin/../conf/zoo.cfg

Mode: standalone

[hadoop@chavin zookeeper-3.4.5]$ bin/zkCli.sh

Connecting to localhost:2181

... ...

至此，单节点zk服务器安装完成.

2）zookeeper集群模式安装

安装zkserver集群：

$ tar -zxvf zookeeper-3.4.5.tar.gz -C /usr/local/

$ chown -R hadoop:hadoop zookeeper-3.4.5/

$ cp zoo_sample.cfg zoo.cfg

$vi zoo.cfg    --在文件中添加下面内容

dataDir=/usr/local/zookeeper-3.4.5/data

server.1=db01:2888:3888

server.2=db02:2888:3888

server.3=db03:2888:3888

配置myid文件：

$cd /usr/local/zookeeper-3.4.5/data/

$vi myid

输入上述对应server编号1

同步安装文件到其他两个节点上：

# scp -r zookeeper-3.4.5/ db02:/usr/local/

# scp -r zookeeper-3.4.5/ db03:/usr/local/

修改各个服务器的myid文件。

分别启动zk集群服务器：

db01$ bin/zkServer.sh start

db02$ bin/zkServer.sh start

db03$ bin/zkServer.sh start

5、Zookeeper配置参数解释

tickTime：这个时间是作为zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个ticktime时间就会发送一次心跳。

dataDir：顾名思义就是zookeeper保存数据的目录，默认情况下，zookeeper将写数据的日志文件也保存在这个目录里。

clientPort：这个端口号就是客户端连接zkserver服务器的端口，zookeeper会监听这个端口号，接受客户端访问请求。

Initlimit：这个配置项是用来配置zookeeper接受客户端（这里所说的客户端不是用户连接zookeeper服务器的客户端，而是zookeeper服务器集群中连接到leader的follower服务器）初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过10个心跳的时间（也就是ticktime）长度后zookeeper服务器还没有收到客户端的返回信息，那么表明这个客户端连接失败，总的时间长度就是5*2000=10秒。

Synclimit：这个配置项标示leader与follower之间发送消息，请求和应答时间长度，最长不能超过多少个ticktime的时间长度，总的长度也就是2*2000=4秒。

Server.A=B:C:D：其中A是一个数字，标示这个是第几号服务器；B是这个服务器的ip地址；C标示的是这个服务器与集群中leader服务器交换信息的端口；D表示的是万一集群中的leader服务器挂了，需要一个端口来重新进行选举，选出一个新的leader，而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式，由于B都是一样的，所以不同的zookeeper实例通信端口号不能一样，所以要给他们分配不同的端口号。

集群模式下配置一个文件myid，这个文件在dataDir目录下，这个文件里面就有一个数据就是A的值，zookeeper启动时读取此文件，拿到里面的数据zoo.cfg里面的配置信息比较从而判断到底是那个server。

6、Zookeeper client命令

命令：bin/zkCli.sh -server localhost:2181