https://web.stanford.edu/~ouster/cgi-bin/papers/OngaroPhD.pdf https://raft.github.io/raft.pdf 如何浅显易懂地解说 Paxos 的算法? https://www.zhihu.com/question/19787937 https://lamport.azurewebsites.net/pubs/paxos-simple.pdf https://mysqlhighavailability.com/the-k…

zk ( zookeeper )的分布式仅仅指的是备份模式. 分布式 mysql 不仅仅要关注备份(从以往的半主,主主,到 paxos). (mysql 比 hbase 的region成熟, hdfs, mongodb 也还好.) 更要关注表的层面: 如何 split 分表, partition , 更要知道如何迁移. (这个 hbase 和 mongodb 比较成熟) 两个方面. 终极线上数据库: 先分热冷,再分区. 目前热数据:mysql 冷数据:phoenix(hbase),天然 大数据+…

容器 在了解 Kubernetes 之前,让我们先了解一个容器. 因为如果不了解容器就没法聊容器编排. 容器就是...一个你塞入所有材料的容器. "材料"是指你的应用代码.依赖库,以及直到内核的依赖关系. 关键概念是隔离,把你的这些材料隔离出来,以便更好的控制他们. 容器提供了3种类型的隔离: 工作空间隔离(进程.网络) 资源隔离(CPU.内存) 文件系统隔离 容器可以理解为节食的VM,具有隔离性,但容器非常精简.体积小.启动快. VM是在操作系统之上又安装了多个操作系统,VM之间自然…

复制集 MongoDB复制集RS(ReplicationSet): 基本构成是1主2从的结构,自带互相监控投票机制(Raft(MongoDB)Paxos(mysql MGR 用的是变种)) 如果发生主库宕机, 复制集内部会进行投票选举,选择一个新的主库替代原有主库对外提供服务.同时复制集会自动通知.客户端程序, 主库已经发生切换了, 应用就会连接到新的主库; 4.png 配置Replication Set 1 . 单台配置多实例 // 多套目录 su - mongod mkdir -p /mon…

1.介绍 MongoDB是C++语言编写,是一个基于分布式文件存储的开源数据库系统,MongoDB将数据存储为一个文档, 数据结构由键值对(key=>value)组成,MongoDB文档类似于 JSON 对象 2.MongoDB和MySQL对比 1.逻辑结构对比 MySQL mongo 库 库 表 集合 字段 key:value 行 文档 2.内容对比: 1)mysql数据结构: name age job oldzhang 28 it xiaozhang 28 it xiaofei 18 stu…

mit 分布式论文集 https://github.com/feixiao/Distributed-Systems wiki上描述的几种都明白了就出师了 raft 和 zab 是类似的,都是1.先选举,2.然后再对客户端的消息进行投票.  其实是 simple paxos 的一种变化. 和 原生paxos 的区别在于: 选举的阶段其实是 prepare 的阶段. 选举允许多个主出现. 1. 读原文 paxos-simple-Copy [ https://www.microsoft.com/en-…

Paxos算法是莱斯利·兰伯特(Leslie Lamport)1990年提出的一种基于消息传递的一致性算法.Paxos算法解决的问题是一个分布式系统如何就某个值(决议)达成一致.在工程实践意义上来说,就是可以通过Paxos实现多副本一致性,分布式锁,名字管理,序列号分配等.比如,在一个分布式数据库系统中,如果各节点的初始状态一致,每个节点执行相同的操作序列,那么他们最后能得到一个一致的状态.为保证每个节点执行相同的命令序列,需要在每一条指令上执行一个“一致性算法”以保证每个节点看到的指令一致.本…

高可用架构对于互联网服务基本是标配,无论是应用服务还是数据库服务都需要做到高可用.虽然互联网服务号称7*24小时不间断服务,但多多少少有一些时候服务不可用,比如某些时候网页打不开,百度不能搜索或者无法发微博,发微信等.一般而言,衡量高可用做到什么程度可以通过一年内服务不可用时间作为参考,要做到3个9的可用性,一年内只能累计有8个小时不可服务,而如果要做到5个9的可用性,则一年内只能累计5分钟服务中断.所以虽说每个公司都说自己的服务是7*24不间断的,但实际上能做到5个9的屈指可数,甚至根本做不到…

mysql group replication,组复制,提供了多写(multi-master update)的特性,增强了原有的mysql的高可用架构.mysql group replication基于mysql插件架构实现,本身就是一个mysql插件. 提供的特性: 多写,写冲突检测 良好的扩展能力,可动态增删节点,组成员自动管理 组内高可用 确保组内数据最终一致性[重要](通过分布式协议和分布式recovery机制保证) 1. 架构 组复制基于mysql插件架构实现,本身作为一个mysql插…

Mysql 5.7.17发布了,主要修复: Changes in MySQL 5.7.17 (2016-12-12, General Availability) Compilation Notes MySQL Enterprise Notes Packaging Notes Security Notes Test Suite Notes Functionality Added or Changed Bugs Fixed Compilation Notes For GCC versions hig…