Zookeeper-相关流程
选主流程:
当Zk进入恢复模式时,需要重新选举出一个新的leader,让所有的Server都恢复到一个正确的状态。Zk的选举算法有两种:一种是基于basic paxos实现的,一种是基于fast paxos算法实现的。系统默认的是fast paxos。
basic paxos流程:
1、当前Server中发起选举的线程担任选举线程,主要功能是对投票结果进统计,并选出推荐的Server
2、选举线程向所有的Server发起一次询问(包括自己)
3、选举线程收到Server的回复后,通过验证zxid是否一致来判断是否是自己发起的询问。然后获取对方的id(myid),并存储到当前询问对象列表中,最后获取对方提议的leader相关信息(id,zxid),并将这些信息存储到当次选举的投票记录表中
4、收到所有的Server回复后,计算出zxid最大的server,并将这个server相关信息设置为下一次要投票的server
5、线程将当前zxid最大的Server设置为当前Server要推荐的leader,如果此时获胜的Server获得N/2+1的Server票数,设置当前推荐的leader为获胜的Server,将根据获胜的Server相关信息设置自己的状态,否则,继续这个过程,知道leader被选举出来
要使leader获得多数server支持,则server总数必须是奇数2n+1,且存活的Server的数目不得少于n+1。
每个Server启动后都会重复意思流程。在恢复模式下,如果是刚从崩溃状态恢复的或者刚启动的Server还会从磁盘快照中恢复数据和会话信息。zk会记录事务日志并定期进行快照,方便在恢复时进行状态恢复。选主的具体流程图如下:
fast paxos流程:
在选举过程中,某server首先先所有server提议自己要成为leader,当其他server收到提议后,解决epoch和zxid的冲突,并接受对方的提议,然后向对方发送接收提议完成的消息,重复这个流程,最后一定能选出leader。流程图如下:
同步流程:
选举完leader以后,zk进入状态同步过程。
1、leader等待server连接
2、Follower连接leader,将最大的zxid发送给leader
3、leader根据follower的zxid确定同步点
4、完成同步后通知follwoer已经成为uptodate状态
5、follower收到uptodate消息后,又可以重新接受client的请求进行服务
工作流程:
Leader的工作流程
leader主要由三个功能:
1、恢复数据;
2、维持与learner的心跳,接收learner请求并判断learner的请求消息类型;
3、learner的消息类型主要由PING消息、REQUEST消息、ACK消息、REVALIDATE消息根据不同消息类型,进行不同的处理;
PING消息:指Learner的心跳消息。
REQUEST消息:指follower发送的提议信息,包括写请求及同步请求。
ACK消息:是follower对提议的回复,超过半数follower通过,则commit该提议。
REVALIDATE消息:用来延长SESSION有效时间。
Leader的工作流程简图如下所示,实际实现中要复杂得多,启动了三个线程来实现功能。
follower工作流程
follower主要有四个功能:
1、向leader发送请求(PING、REQUEST、ACK、REVALIDATE)
2、接收leader消息并处理
3、接收client的请求,如果为写请求,发送给leader进行投票
4、返回client结果
follower的消息循环处理如下几种来着leader的消息:
1、PING消息:心跳消息
2、PROPOSAL消息:Leader发起的提案,要求follower投票
3、COMMIT消息:服务端最新一次提案的信息
4、UPTODATE消息:表明同步完成
5、REVALIDATE消息:根据leader的REVALIDATE结果,关闭待revalidate的session还是允许其接受消息
6、SYNC消息:返回SYNC结果到客户端。这个消息最初由客户端发起,用来强制得到最新的更新
follower的工作流程简图如下,在实际实现中,follower是通过5个线程来实现功能的。
Observer的流程和follower相似,不同点就是Observer不参加投票
Zookeeper-相关流程的更多相关文章
- SpringBoot启动原理及相关流程
一.springboot启动原理及相关流程概览 springboot是基于spring的新型的轻量级框架,最厉害的地方当属自动配置.那我们就可以根据启动流程和相关原理来看看,如何实现传奇的自动配置 二 ...
- git 相关流程和报错解决
git 相关流程: 预先配置: gitroot $ git config user.name XXXgitroot $ git config user.email XXX@XXX.com git re ...
- Zookeeper Watcher 流程分析(结合源码)
概述 ZK提供了分布式数据的发布/订阅功能,一个典型的发布/订阅模型系统定义了一种一对多的订阅关系,能够让多个订阅者同时监听某个主题对象,当这个主题对象自身状态发生变化时,会通知所有的订阅者.在ZK中 ...
- Zookeeper启动流程分析
前言 之前的Zookeeper协议篇-Paxos算法与ZAB协议通过了解Paoxs算法开始,到Zab协议的两大特性:崩溃恢复和消息广播,学习了Zookeeper是如何通过Zab协议实现高可用,本篇主要 ...
- Zookeeper相关知识
一.Zookeeper是什么? Zookeeper 分布式服务框架是 Apache Hadoop 的一个子项目,它主要是用来解决分布式应用中经常遇到的一些数据管理问题,如:统一命名服务.状态同步服务. ...
- zookeeper相关知识的总结:
一.分布式协调技术 在给大家介绍ZooKeeper之前先来给大家介绍一种技术——分布式协调技术.那么什么是分布式协调技术?那么我来告诉大家,其实分布式协调技术 主要用来解决分布式环境当中多个进程之间的 ...
- zookeeper启动流程简单梳理
等着測试童鞋完工,顺便里了下zookeeper的启动流程 zk3.4.6 启动脚本里面 nohup "$JAVA" "-Dzookeeper.log.dir=${ZOO_ ...
- ZooKeeper 相关知识
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明.本文链接:https://blog.csdn.net/zhang123456456/articl ...
- zookeeper 相关学习资料
zookeeper的配置:http://www.cnblogs.com/yuyijq/p/3438829.html zookeeper运维:http://blog.csdn.net/hengyunab ...
- Android中G-Sensor相关流程
1.使G-sensor正常工作需要做的事: G-sensor driver文件包括: driver/i2c/chips/lis331dl.c driver/i2c/chips/sensorioctl. ...
随机推荐
- .NET代码设计简单规范
以下转载于:http://www.it28.cn/ASPNET/825095.html 下面这个规范是我为朋友写的几点建议,写的很范,作为BLOG,愿与大家一起分享.只给出部分设计规范样例,关于.NE ...
- OCaml相关
1.open Core.Std 时报Unbound module Core 先安装库 $ opam init $ opam install core $ opam install utop 在~/.o ...
- Apache POI导出excel表格
项目中我们经常用到导出功能,将数据导出以便于审查和统计等.本文主要使用Apache POI实现导出数据. POI中文文档 简介 ApachePOI是Apache软件基金会的开放源码函式库,POI提供A ...
- chrome新版打开新标签页自动打开谷歌主页
最近更新了chrome,发现新版有个问题. 打开标签页时会自动跳转至 https://www.google.com/webhp?ie=UTF-8&gws_rd=cr&rct=j 导致我 ...
- Python实例---模拟微信网页登录(day3)
第四步: 扫码成功后获取最近联系人信息---day3代码 settings.py """ Django settings for weixin project. Gene ...
- Linux 小知识翻译 - 「版本号」的命名方式
包括OS,所有的软件都有版本号信息.一般来说,版本号的增大表示软件的功能增强了或者修正了一些Bug,也就是表示软件更新了. 版本号的命名方式没有统一的标准.每种软件都不一样. 大部分情况下,版本号以「 ...
- WEB应用打成jar包全记录
内容属原创,转载请注明出处 题外 由于项目的需求—不管是怎么产生的这个需求—总之,需要支持把一个web应用打成jar包供其他应用使用,这就有了下面的过程. 这个过程里用到了Spring和SpringM ...
- 拓普微小尺寸TFT液晶屏-高性价比
智能模块(Smart LCD)是专为工业显示应用而设计的TFT液晶显示模块. 模块自带主控IC.Flash存储器.实时嵌入式操作系统,客户主机可把要存储的数据(如背景图.图标等)存储到屏的flash中 ...
- 用PHP的curl实现并发请求远程文件(并发抓取远程网页)
PHP的curl功能确实强大了.里面有个curl_multi_init功能,就是批量处理任务.可以利用此,实现多进程同步抓取多条记录,优化普通的网页抓取程序. 一个简单的抓取函数: function ...
- 【js】数组的splice方法和slice方法的区别
1.splice方法和slice都是数组的方法 2.splice方法有3种作用 例如,arr=[1,2,3,4,5,6]; splice方法 删除 arr.splice(1, 1); 返回值为删除的 ...