Zookeeper(一)CentOS7.5搭建Zookeeper3.4.12集群与命令行操作
一. 分布式安装部署
1.0 下载地址
官网首页: https://zookeeper.apache.org/
下载地址: http://mirror.bit.edu.cn/apache/zookeeper/
1.1 集群规划
在node21、node22和ode23三个节点上部署Zookeeper,三个节点都已安装jdk。
IP | 节点名称 | Zookeeper | JDK |
192.168.100.21 | node21 | Zookeeper | JDK |
192.168.100.22 | node22 | Zookeeper | JDK |
192.168.100.23 | node23 | Zookeeper | JDk |
1.2 解压安装
(1)解压zookeeper安装包到/opt/module/目录下
- [admin@node21 software]$ tar -zxvf zookeeper-3.4.12.tar.gz -C /opt/module/
(2)在/opt/module/zookeeper-3.4.12/这个目录下创建Data
- [admin@node21 zookeeper-3.4.12]# sudo mkdir Data
(3)重命名/opt/module/zookeeper-3.4.12/conf这个目录下的zoo_sample.cfg为zoo.cfg
- [admin@node21 conf]# mv zoo_sample.cfg zoo.cfg
1.3 配置zoo.cfg文件
具体配置,修改dateDir,添加日志存放目录
- dataDir=/opt/module/zookeeper-3.4.12/Data
dataLogDir=/opt/module/zookeeper-3.4.12/logs
末尾增加如下配置
- server.1=node21:2888:3888
- server.2=node22:2888:3888
- server.3=node23:2888:3888
1.4 集群配置
(1)在/opt/module/zookeeper-3.4.12/Data目录下创建一个myid的文件
- [admin@node21 Data]# sudo touch myid
(2)编辑myid文件, 在文件中添加与server对应的编号:如 1
- [admin@node21 Data]# vi myid
(3)拷贝配置好的zookeeper到其他机器上
- [admin@node21 module]# scp -r zookeeper-3.4.12/ admin@node22:/opt/module/
- [admin@node21 module]# scp -r zookeeper-3.4.12/ admin@node23:/opt/module/
并分别修改node22,node23中myid文件中内容为2、3
- [admin@node22 Data]# echo > myid
- [admin@node23 Data]# echo > myid
1.5 启动集群
(1)分别启动zookeeper
- [admin@node21 zookeeper-3.4.12]# bin/zkServer.sh start
- [admin@node22 zookeeper-3.4.12]# bin/zkServer.sh start
- [admin@node23 zookeeper-3.4.12]# bin/zkServer.sh start
(2)查看状态
- [admin@node21 zookeeper-3.4.12]# bin/zkServer.sh status
- ZooKeeper JMX enabled by default
- Using config: /opt/module/zookeeper-3.4.12/bin/../conf/zoo.cfg
- Mode: follower
- [admin@node22 zookeeper-3.4.12]# bin/zkServer.sh status
- ZooKeeper JMX enabled by default
- Using config: /opt/module/zookeeper-3.4.12/bin/../conf/zoo.cfg
- Mode: follower
- [admin@node23 zookeeper-3.4.12]# bin/zkServer.sh status
- ZooKeeper JMX enabled by default
- Using config: /opt/module/zookeeper-3.4.12/bin/../conf/zoo.cfg
- Mode: leader
(3)停止zookeeper
- [admin@node21 zookeeper-3.4.]$ bin/zkServer.sh stop
1.6 配置环境变量
- [admin@node21 zookeeper-3.4.]$ sudo vi /etc/profile
export ZOOKEEPER_HOME=/opt/module/zookeeper-3.4.
export PATH=$PATH:$ZOOKEEPER_HOME/bin
1.7zoo.cfg配置参数解读
Server.A=B:C:D。
A是一个数字,表示这个是第几号服务器;
B是这个服务器的ip地址;
C是这个服务器与集群中的Leader服务器交换信息的端口;
D是万一集群中的Leader服务器挂了,需要一个端口来重新进行选举,选出一个新的Leader,而这个端口就是用来执行选举时服务器相互通信的端口。
集群模式下配置一个文件myid,这个文件在dataDir目录下,这个文件里面有一个数据就是A的值,Zookeeper启动时读取此文件,拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。
1)tickTime=2000:通信心跳数
tickTime:通信心跳数,Zookeeper服务器心跳时间,单位毫秒
Zookeeper使用的基本时间,服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个tickTime时间就会发送一个心跳,时间单位为毫秒。
它用于心跳机制,并且设置最小的session超时时间为两倍心跳时间。(session的最小超时时间是2*tickTime)
2)initLimit=10:LF初始通信时限
集群中的follower跟随者服务器(F)与leader领导者服务器(L)之间初始连接时能容忍的最多心跳数(tickTime的数量),用它来限定集群中的Zookeeper服务器连接到Leader的时限。
投票选举新leader的初始化时间
Follower在启动过程中,会从Leader同步所有最新数据,然后确定自己能够对外服务的起始状态。
Leader允许F在initLimit时间内完成这个工作。
3)syncLimit=5:LF同步通信时限
集群中Leader与Follower之间的最大响应时间单位,假如响应超过syncLimit * tickTime,
Leader认为Follwer死掉,从服务器列表中删除Follwer。
在运行过程中,Leader负责与ZK集群中所有机器进行通信,例如通过一些心跳检测机制,来检测机器的存活状态。
如果L发出心跳包在syncLimit之后,还没有从F那收到响应,那么就认为这个F已经不在线了。
4)dataDir:数据文件目录+数据持久化路径
保存内存数据库快照信息的位置,如果没有其他说明,更新的事务日志也保存到数据库。
5)clientPort=2181:客户端连接端口
监听客户端连接的端口
二. 客户端命令行操作
1)启动客户端
- [admin@node21 zookeeper-3.4.]$ zkCli.sh
2)显示所有操作命令
- [zk: localhost:(CONNECTED) ] help
- ZooKeeper -server host:port cmd args
- stat path [watch]
- set path data [version]
- ls path [watch]
- delquota [-n|-b] path
- ls2 path [watch]
- setAcl path acl
- setquota -n|-b val path
- history
- redo cmdno
- printwatches on|off
- delete path [version]
- sync path
- listquota path
- rmr path
- get path [watch]
- create [-s] [-e] path data acl
- addauth scheme auth
- quit
- getAcl path
- close
- connect host:port
3)查看当前znode中所包含的内容
- [zk: localhost:(CONNECTED) ] ls /
- [zookeeper]
4)查看当前节点数据并能看到更新次数等数据
- [zk: localhost:(CONNECTED) ] ls2 /
- [zookeeper]
- cZxid = 0x0
- ctime = Wed Dec :: EST
- mZxid = 0x0
- mtime = Wed Dec :: EST
- pZxid = 0x0
- cversion = -
- dataVersion =
- aclVersion =
- ephemeralOwner = 0x0
- dataLength =
- numChildren =
5)创建普通节点
- [zk: localhost:(CONNECTED) ] create /opt "aa"
- Created /opt
- [zk: localhost:(CONNECTED) ] create /opt/module "bb"
- Created /opt/module
6)获得节点的值
- [zk: localhost:(CONNECTED) ] get /opt
- aa
- cZxid = 0x4100000004
- ctime = Wed Jul :: EDT
- mZxid = 0x4100000004
- mtime = Wed Jul :: EDT
- pZxid = 0x4100000005
- cversion =
- dataVersion =
- aclVersion =
- ephemeralOwner = 0x0
- dataLength =
- numChildren =
- [zk: localhost:(CONNECTED) ] get /opt/module
- bb
- cZxid = 0x4100000005
- ctime = Wed Jul :: EDT
- mZxid = 0x4100000005
- mtime = Wed Jul :: EDT
- pZxid = 0x4100000005
- cversion =
- dataVersion =
- aclVersion =
- ephemeralOwner = 0x0
- dataLength =
- numChildren =
7)创建短暂节点
- [zk: localhost:(CONNECTED) ] create -e /app
- Created /app
- (1)在当前客户端是能查看到的
- [zk: localhost:(CONNECTED) ] ls /
- [app, opt, zookeeper]
- (2)退出当前客户端然后再重启启动客户端
- [zk: localhost:(CONNECTED) ] quit
- [root@node21 zookeeper-3.4.]$ bin/zkCli.sh
- (3)再次查看根目录下短暂节点已经删除
- [zk: localhost:(CONNECTED) ] ls /
- [opt, zookeeper]
8)创建带序号的节点
- (1)先创建一个普通的根节点app
- [zk: localhost:(CONNECTED) ] create /app "app"
- create /app "app"
- (2)创建带序号的节点
- [zk: localhost:(CONNECTED) ] create -s /app/aa
- Created /app/aa0000000000
- [zk: localhost:(CONNECTED) ] create -s /app/bb
- Created /app/bb0000000001
- [zk: localhost:(CONNECTED) ] create -s /app/cc
- Created /app/cc0000000002
- 如果原节点下有1个节点,则再排序时从1开始,以此类推。
- [zk: localhost:(CONNECTED) ] create -s /opt/aa
- Created /opt/aa0000000001
9)修改节点数据值
- [zk: localhost:(CONNECTED) ] set /opt
- cZxid = 0x4100000004
- ctime = Wed Jul :: EDT
- mZxid = 0x410000000e
- mtime = Wed Jul :: EDT
- pZxid = 0x410000000d
- cversion =
- dataVersion =
- aclVersion =
- ephemeralOwner = 0x0
- dataLength =
- numChildren =
10)节点的值变化监听
(1)在node22主机上注册监听/opt节点数据变化
- [admin@node22 ~]$ zkCli.sh
- [zk: localhost:(CONNECTED) ] get /opt watch
(2)在node21主机上修改/opt节点的数据
- [zk: localhost:(CONNECTED) ] set /opt
(3)观察node22主机收到数据变化的监听
- [zk: localhost:(CONNECTED) ]
- WATCHER::
- WatchedEvent state:SyncConnected type:NodeDataChanged path:/opt
11)节点的子节点变化监听(路径变化)
(1)在node22主机上注册监听/opt节点的子节点变化
- [zk: localhost:(CONNECTED) ] ls /opt watch
- [aa0000000001, module]
(2)在node21主机/opt节点上创建子节点
- [zk: localhost:(CONNECTED) ] create /opt/bb
- Created /opt/bb
(3)观察node22主机收到子节点变化的监听
- [zk: localhost:(CONNECTED) ]
- WATCHER::
- WatchedEvent state:SyncConnected type:NodeChildrenChanged path:/opt
12)删除节点
- [zk: localhost:(CONNECTED) ] delete /opt/bb
13)递归删除节点
- [zk: localhost:(CONNECTED) ] rmr /opt
14)查看节点状态
- [zk: localhost:(CONNECTED) ] stat /app
- cZxid = 0x4100000009
- ctime = Wed Jul :: EDT
- mZxid = 0x4100000009
- mtime = Wed Jul :: EDT
- pZxid = 0x410000000c
- cversion =
- dataVersion =
- aclVersion =
- ephemeralOwner = 0x0
- dataLength =
- numChildren =
15)退出客户端
- [zk: localhost:(CONNECTED) ] quit
Zookeeper(一)CentOS7.5搭建Zookeeper3.4.12集群与命令行操作的更多相关文章
- Storm(二)CentOS7.5搭建Storm1.2.2集群
一.Storm的下载 官网下载地址:http://storm.apache.org/downloads.html 这里下载最新的版本storm1.2.2,进入之后选择一个镜像下载 二.Storm伪分布 ...
- HBase(二)CentOS7.5搭建HBase1.2.6HA集群
一.安装前提 1.HBase 依赖于 HDFS 做底层的数据存储 2.HBase 依赖于 MapReduce 做数据计算 3.HBase 依赖于 ZooKeeper 做服务协调 4.HBase源码是j ...
- CentOS7.5搭建spark2.3.1集群
一 下载安装包 1 官方下载 官方下载地址:http://spark.apache.org/downloads.html 2 安装前提 Java8 安装成功 zookeeper 安 ...
- CentOS7.5搭建Solr7.4.0集群服务
一.Solr集群概念 solr单机版搭建参考: https://www.cnblogs.com/frankdeng/p/9615253.html 1.概念 SolrCloud(solr 云)是Solr ...
- centos7安装zookeeper3.4.12集群
zookeeper的三要素: 1.一致,能够保证数据的一致性 2.有头,始终有一个leader,node/2+1个节点有效,就能正常工作 3.数据树,树状结构且每个树必须有数据 1. 环境准备 操作系 ...
- CentOS7.1.x+Druid 0.12 集群配置
原文转载自:https://blog.csdn.net/bigtree_3721/article/details/79583008 先决条件:安装版本列表 本次安装满足下面的条件: CentOS v7 ...
- centos7 下搭建hadoop2.9 分布式集群
首先说明,本文记录的是博主搭建的3节点的完全分布式hadoop集群的过程,环境是centos 7,1个nameNode,2个dataNode,如下: 1.首先,创建好3个Centos7的虚拟机,具体的 ...
- 【更新】搭建 Zookeeper-3.4.11 集群
先准备好三台linux(虚拟机). 1. 先把Java环境配好.我CentOS-7-x86_64-DVD-1708 + jdk1.8.0_161 1.1 先把jdk上传到系统里面(我利用的Filezi ...
- CentOS7.5搭建ELK6.2.4集群及插件安装
一 简介 Elasticsearch是一个高度可扩展的开源全文搜索和分析引擎.它允许您快速,近实时地存储,搜索和分析大量数据.它通常用作支持具有复杂搜索功能和需求的应用程序的底层引擎/技术. 下载地址 ...
随机推荐
- C# 基础之string[,] 和string[][]
昨天做项目时碰到一个问题,后台返回一张关系表,里面就两个字段,简化为A,B字段(1:N的关系),一个A对应多个B字段. 由于对于string[,] 和string[][] 的认识不到位,刚开始搞错了数 ...
- DHCP Server (推荐使用Windows)
一些小的服务 windows做的比linux好 DHCP服务概述: 名称:DHCP (Dynamic Host Configuration Protocol --动态主机配置协议) 功能:是一个局域网 ...
- 发布自己的类库到NuGet
NuGet是一个为大家所熟知的Visual Studio扩展,通过这个扩展,开发人员可以非常方便地在Visual Studio中安装或更新项目中所需要的第三方组件,同时也可以通过NuGet来安装一些V ...
- 利用HBuilder将vue项目打包成移动端app
事先准备,开发完成的web app项目(也可以利用vue-cli脚手架构建vue模板项目),npm run dev可以正常预览的项目 1,将项目目录下config文件内index.js中assetsP ...
- ASP.NET MVC5高级编程 之 路由
每个ASP.NET MVC应用程序都需要路由来定义自己处理请求的方式.路由是MVC应用程序的入口点.路由的核心工作是将一个请求映射到一个操作 路由主要有两种用途: 匹配传入的请求(该请求不匹配服务器文 ...
- 51nod--1264 线段相交 (计算几何基础, 二维)
题目: 1264 线段相交 基准时间限制:1 秒 空间限制:131072 KB 分值: 0 难度:基础题 收藏 关注 给出平面上两条线段的两个端点,判断这两条线段是否相交(有一个公共点或有部分重合认为 ...
- 进程命令ps/top/kill
进程: 通俗的说就是 当前正在执行的一个程序 命令: ps 英文: process status 作用: 查看进程的详细状况 选项: a:显示终端上的所有进程,包括其他用户的进程 u:显示进程的详细状 ...
- ubuntu安装pycharm并建立桌面快捷方式
环境:ubuntu18.04 参考文章:本地安装:https://blog.csdn.net/liuxiao214/article/details/78893457 在线安装:https://www. ...
- jQuery传参
<a href="#" onClick="click_scroll('here1');">滚动到here1</a><a href= ...
- jdbctemplate 调用oracle 有返回(会话型临时表数据的)结果的存储过程
注:本文为博主 原创. jdbctemplate 调用oracle存储过程 事务 临时表 有返回结果 1:java 代码 本逻辑代码本是想把 java 代码里的list<Strign>类 ...