Zookeeper(一)CentOS7.5搭建Zookeeper3.4.12集群与命令行操作
一. 分布式安装部署
1.0 下载地址
官网首页: https://zookeeper.apache.org/
下载地址: http://mirror.bit.edu.cn/apache/zookeeper/
1.1 集群规划
在node21、node22和ode23三个节点上部署Zookeeper,三个节点都已安装jdk。
IP | 节点名称 | Zookeeper | JDK |
192.168.100.21 | node21 | Zookeeper | JDK |
192.168.100.22 | node22 | Zookeeper | JDK |
192.168.100.23 | node23 | Zookeeper | JDk |
1.2 解压安装
(1)解压zookeeper安装包到/opt/module/目录下
[admin@node21 software]$ tar -zxvf zookeeper-3.4.12.tar.gz -C /opt/module/
(2)在/opt/module/zookeeper-3.4.12/这个目录下创建Data
[admin@node21 zookeeper-3.4.12]# sudo mkdir Data
(3)重命名/opt/module/zookeeper-3.4.12/conf这个目录下的zoo_sample.cfg为zoo.cfg
[admin@node21 conf]# mv zoo_sample.cfg zoo.cfg
1.3 配置zoo.cfg文件
具体配置,修改dateDir,添加日志存放目录
dataDir=/opt/module/zookeeper-3.4.12/Data
dataLogDir=/opt/module/zookeeper-3.4.12/logs
末尾增加如下配置
server.1=node21:2888:3888
server.2=node22:2888:3888
server.3=node23:2888:3888
1.4 集群配置
(1)在/opt/module/zookeeper-3.4.12/Data目录下创建一个myid的文件
[admin@node21 Data]# sudo touch myid
(2)编辑myid文件, 在文件中添加与server对应的编号:如 1
[admin@node21 Data]# vi myid
(3)拷贝配置好的zookeeper到其他机器上
[admin@node21 module]# scp -r zookeeper-3.4.12/ admin@node22:/opt/module/
[admin@node21 module]# scp -r zookeeper-3.4.12/ admin@node23:/opt/module/
并分别修改node22,node23中myid文件中内容为2、3
[admin@node22 Data]# echo > myid
[admin@node23 Data]# echo > myid
1.5 启动集群
(1)分别启动zookeeper
[admin@node21 zookeeper-3.4.12]# bin/zkServer.sh start
[admin@node22 zookeeper-3.4.12]# bin/zkServer.sh start
[admin@node23 zookeeper-3.4.12]# bin/zkServer.sh start
(2)查看状态
[admin@node21 zookeeper-3.4.12]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.12/bin/../conf/zoo.cfg
Mode: follower
[admin@node22 zookeeper-3.4.12]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.12/bin/../conf/zoo.cfg
Mode: follower
[admin@node23 zookeeper-3.4.12]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.12/bin/../conf/zoo.cfg
Mode: leader
(3)停止zookeeper
[admin@node21 zookeeper-3.4.]$ bin/zkServer.sh stop
1.6 配置环境变量
[admin@node21 zookeeper-3.4.]$ sudo vi /etc/profile
export ZOOKEEPER_HOME=/opt/module/zookeeper-3.4.
export PATH=$PATH:$ZOOKEEPER_HOME/bin
1.7zoo.cfg配置参数解读
Server.A=B:C:D。
A是一个数字,表示这个是第几号服务器;
B是这个服务器的ip地址;
C是这个服务器与集群中的Leader服务器交换信息的端口;
D是万一集群中的Leader服务器挂了,需要一个端口来重新进行选举,选出一个新的Leader,而这个端口就是用来执行选举时服务器相互通信的端口。
集群模式下配置一个文件myid,这个文件在dataDir目录下,这个文件里面有一个数据就是A的值,Zookeeper启动时读取此文件,拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。
1)tickTime=2000:通信心跳数
tickTime:通信心跳数,Zookeeper服务器心跳时间,单位毫秒
Zookeeper使用的基本时间,服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个tickTime时间就会发送一个心跳,时间单位为毫秒。
它用于心跳机制,并且设置最小的session超时时间为两倍心跳时间。(session的最小超时时间是2*tickTime)
2)initLimit=10:LF初始通信时限
集群中的follower跟随者服务器(F)与leader领导者服务器(L)之间初始连接时能容忍的最多心跳数(tickTime的数量),用它来限定集群中的Zookeeper服务器连接到Leader的时限。
投票选举新leader的初始化时间
Follower在启动过程中,会从Leader同步所有最新数据,然后确定自己能够对外服务的起始状态。
Leader允许F在initLimit时间内完成这个工作。
3)syncLimit=5:LF同步通信时限
集群中Leader与Follower之间的最大响应时间单位,假如响应超过syncLimit * tickTime,
Leader认为Follwer死掉,从服务器列表中删除Follwer。
在运行过程中,Leader负责与ZK集群中所有机器进行通信,例如通过一些心跳检测机制,来检测机器的存活状态。
如果L发出心跳包在syncLimit之后,还没有从F那收到响应,那么就认为这个F已经不在线了。
4)dataDir:数据文件目录+数据持久化路径
保存内存数据库快照信息的位置,如果没有其他说明,更新的事务日志也保存到数据库。
5)clientPort=2181:客户端连接端口
监听客户端连接的端口
二. 客户端命令行操作
1)启动客户端
[admin@node21 zookeeper-3.4.]$ zkCli.sh
2)显示所有操作命令
[zk: localhost:(CONNECTED) ] help
ZooKeeper -server host:port cmd args
stat path [watch]
set path data [version]
ls path [watch]
delquota [-n|-b] path
ls2 path [watch]
setAcl path acl
setquota -n|-b val path
history
redo cmdno
printwatches on|off
delete path [version]
sync path
listquota path
rmr path
get path [watch]
create [-s] [-e] path data acl
addauth scheme auth
quit
getAcl path
close
connect host:port
3)查看当前znode中所包含的内容
[zk: localhost:(CONNECTED) ] ls /
[zookeeper]
4)查看当前节点数据并能看到更新次数等数据
[zk: localhost:(CONNECTED) ] ls2 /
[zookeeper]
cZxid = 0x0
ctime = Wed Dec :: EST
mZxid = 0x0
mtime = Wed Dec :: EST
pZxid = 0x0
cversion = -
dataVersion =
aclVersion =
ephemeralOwner = 0x0
dataLength =
numChildren =
5)创建普通节点
[zk: localhost:(CONNECTED) ] create /opt "aa"
Created /opt
[zk: localhost:(CONNECTED) ] create /opt/module "bb"
Created /opt/module
6)获得节点的值
[zk: localhost:(CONNECTED) ] get /opt
aa
cZxid = 0x4100000004
ctime = Wed Jul :: EDT
mZxid = 0x4100000004
mtime = Wed Jul :: EDT
pZxid = 0x4100000005
cversion =
dataVersion =
aclVersion =
ephemeralOwner = 0x0
dataLength =
numChildren =
[zk: localhost:(CONNECTED) ] get /opt/module
bb
cZxid = 0x4100000005
ctime = Wed Jul :: EDT
mZxid = 0x4100000005
mtime = Wed Jul :: EDT
pZxid = 0x4100000005
cversion =
dataVersion =
aclVersion =
ephemeralOwner = 0x0
dataLength =
numChildren =
7)创建短暂节点
[zk: localhost:(CONNECTED) ] create -e /app
Created /app
(1)在当前客户端是能查看到的
[zk: localhost:(CONNECTED) ] ls /
[app, opt, zookeeper]
(2)退出当前客户端然后再重启启动客户端
[zk: localhost:(CONNECTED) ] quit
[root@node21 zookeeper-3.4.]$ bin/zkCli.sh
(3)再次查看根目录下短暂节点已经删除
[zk: localhost:(CONNECTED) ] ls /
[opt, zookeeper]
8)创建带序号的节点
(1)先创建一个普通的根节点app
[zk: localhost:(CONNECTED) ] create /app "app"
create /app "app"
(2)创建带序号的节点
[zk: localhost:(CONNECTED) ] create -s /app/aa
Created /app/aa0000000000
[zk: localhost:(CONNECTED) ] create -s /app/bb
Created /app/bb0000000001
[zk: localhost:(CONNECTED) ] create -s /app/cc
Created /app/cc0000000002
如果原节点下有1个节点,则再排序时从1开始,以此类推。
[zk: localhost:(CONNECTED) ] create -s /opt/aa
Created /opt/aa0000000001
9)修改节点数据值
[zk: localhost:(CONNECTED) ] set /opt
cZxid = 0x4100000004
ctime = Wed Jul :: EDT
mZxid = 0x410000000e
mtime = Wed Jul :: EDT
pZxid = 0x410000000d
cversion =
dataVersion =
aclVersion =
ephemeralOwner = 0x0
dataLength =
numChildren =
10)节点的值变化监听
(1)在node22主机上注册监听/opt节点数据变化
[admin@node22 ~]$ zkCli.sh
[zk: localhost:(CONNECTED) ] get /opt watch
(2)在node21主机上修改/opt节点的数据
[zk: localhost:(CONNECTED) ] set /opt
(3)观察node22主机收到数据变化的监听
[zk: localhost:(CONNECTED) ]
WATCHER:: WatchedEvent state:SyncConnected type:NodeDataChanged path:/opt
11)节点的子节点变化监听(路径变化)
(1)在node22主机上注册监听/opt节点的子节点变化
[zk: localhost:(CONNECTED) ] ls /opt watch
[aa0000000001, module]
(2)在node21主机/opt节点上创建子节点
[zk: localhost:(CONNECTED) ] create /opt/bb
Created /opt/bb
(3)观察node22主机收到子节点变化的监听
[zk: localhost:(CONNECTED) ]
WATCHER:: WatchedEvent state:SyncConnected type:NodeChildrenChanged path:/opt
12)删除节点
[zk: localhost:(CONNECTED) ] delete /opt/bb
13)递归删除节点
[zk: localhost:(CONNECTED) ] rmr /opt
14)查看节点状态
[zk: localhost:(CONNECTED) ] stat /app
cZxid = 0x4100000009
ctime = Wed Jul :: EDT
mZxid = 0x4100000009
mtime = Wed Jul :: EDT
pZxid = 0x410000000c
cversion =
dataVersion =
aclVersion =
ephemeralOwner = 0x0
dataLength =
numChildren =
15)退出客户端
[zk: localhost:(CONNECTED) ] quit
Zookeeper(一)CentOS7.5搭建Zookeeper3.4.12集群与命令行操作的更多相关文章
- Storm(二)CentOS7.5搭建Storm1.2.2集群
一.Storm的下载 官网下载地址:http://storm.apache.org/downloads.html 这里下载最新的版本storm1.2.2,进入之后选择一个镜像下载 二.Storm伪分布 ...
- HBase(二)CentOS7.5搭建HBase1.2.6HA集群
一.安装前提 1.HBase 依赖于 HDFS 做底层的数据存储 2.HBase 依赖于 MapReduce 做数据计算 3.HBase 依赖于 ZooKeeper 做服务协调 4.HBase源码是j ...
- CentOS7.5搭建spark2.3.1集群
一 下载安装包 1 官方下载 官方下载地址:http://spark.apache.org/downloads.html 2 安装前提 Java8 安装成功 zookeeper 安 ...
- CentOS7.5搭建Solr7.4.0集群服务
一.Solr集群概念 solr单机版搭建参考: https://www.cnblogs.com/frankdeng/p/9615253.html 1.概念 SolrCloud(solr 云)是Solr ...
- centos7安装zookeeper3.4.12集群
zookeeper的三要素: 1.一致,能够保证数据的一致性 2.有头,始终有一个leader,node/2+1个节点有效,就能正常工作 3.数据树,树状结构且每个树必须有数据 1. 环境准备 操作系 ...
- CentOS7.1.x+Druid 0.12 集群配置
原文转载自:https://blog.csdn.net/bigtree_3721/article/details/79583008 先决条件:安装版本列表 本次安装满足下面的条件: CentOS v7 ...
- centos7 下搭建hadoop2.9 分布式集群
首先说明,本文记录的是博主搭建的3节点的完全分布式hadoop集群的过程,环境是centos 7,1个nameNode,2个dataNode,如下: 1.首先,创建好3个Centos7的虚拟机,具体的 ...
- 【更新】搭建 Zookeeper-3.4.11 集群
先准备好三台linux(虚拟机). 1. 先把Java环境配好.我CentOS-7-x86_64-DVD-1708 + jdk1.8.0_161 1.1 先把jdk上传到系统里面(我利用的Filezi ...
- CentOS7.5搭建ELK6.2.4集群及插件安装
一 简介 Elasticsearch是一个高度可扩展的开源全文搜索和分析引擎.它允许您快速,近实时地存储,搜索和分析大量数据.它通常用作支持具有复杂搜索功能和需求的应用程序的底层引擎/技术. 下载地址 ...
随机推荐
- requests库入门06-post请求
示例相应的接口文档:GitHub邮箱接口文档 先登录GitHub,然后右上角用户下拉框中选择settings,然后选Emails.可以看到当前账户设置的邮箱情况 再看添加邮箱接口的文档描述,可以通过一 ...
- zxing二维码
最近二维码用的很多,同时给了个zxing.dll和demo,用着还不错,就想着自己看看源码.于是搜索到一下资料: ZXing是一个开源Java类库用于解析多种格式的1D/2D条形码.目标是能够对QR编 ...
- 设计模式C++学习笔记之十二(Command命令模式)
命令模式,将一个请求封装为一个对象,从而使你可用不同的请求对客户进行参数化:对请求排队或记录请求日志,以及支持可撤消的操作.应该是一个比较简单的模式了. 12.1.解释 main(),客户 CIn ...
- 关于Mac的rootless问题
由于在OS X 10.11版本添加了rootless,使得root用户在DOS命令下无法操作系统文件并提示无权限. 解决办法: 首先确认升级到最新版本 重新启动电脑,持续按住Command-R直到看见 ...
- UVA 1395 MST
给你一个图, 求一个生成树, 边权Max – Min 要最小,输出最小值, 不能构成生成树的 输出 -1: 思路: Keuksal 算法, 先排序边, 然后枚举 第一条边, 往后加入边, 直到有 n- ...
- servlet web.xml配置选项详解
一般的web工程中都会用到web.xml,web.xml主要包括一些配置标签,例如Filter.Listener.Servlet等,可以用来预设容器的配置,可以方便的开发web工程.但是web.xml ...
- 使用VW时,图片的问题
在项目中,使用了VW适配,给图片直接设置了width和height,浏览器模拟正常,在手机上就不显示 解决办法是:在图片外面包一层div,设置width和height,然后图片设置width:100% ...
- rpm命令用法小结
rpm 是用来管理 Redhat系列的包管理工具: 通过将打包编译好的程序包文件放置在各自的位置上,就完成了安装: rpm [OPTIONS] PACHAGE_FILE 1 安装:: -i : ...
- 1283: 骨牌铺方格(zzuli)
Problem Description 在2×n的一个长方形方格中,用一个1× 2的骨牌铺满方格,输入n ,输出铺放方案的总数.例如n=3时,为2× 3方格,骨牌的铺放方案有三种,如下图: Input ...
- VGG-Net
论文下载 源码GitHub 目的 这篇文章是以比赛为目的——解决ImageNet中的1000类图像分类和定位问题.在此过程中,作者做了六组实验,对应6个不同的网络模型,这六个网络深度逐渐递增的同时,也 ...