9.11、mysql增量备份和增量恢复介绍
1、增量备份:
增量数据是从上次全量备份之后,更新的新数据,对于mysql来说,binlog日志就是mysql的增量数据;
(1)按天进行备份:
周一00点全量备份 |
周二00点全量备份 |
...... |
01.sql.gz |
02.sql.gz |
...... |
周一增量备份 |
周二增量备份 |
...... |
mysql-bin.000001 mysql-bin.000002 mysql-bin.000003 mysql-bin.index |
mysql-bin.000004 mysql-bin.000005 mysql-bin.000006 mysql-bin.index |
...... |
1)优点:恢复时间短,维护成本低;
2)缺点:占用空间多,占用系统资源多,经常锁表影响用户的体验;
(2)按周进行备份:
周六00全量备份 |
||
01.sql.gz |
01.sql.gz |
01.sql.gz |
周一增量备份 |
周二增量备份 |
周三增量备份 |
mysql-bin.000001 mysql-bin.000002 mysql-bin.000003 mysql-bin.index |
mysql-bin.000004 mysql-bin.000005 mysql-bin.000006 mysql-bin.index |
mysql-bin.000007 mysql-bin.000008 mysql-bin.000009 mysql-bin.index |
1)优点:节省备份时间,减小本分压力;
2)缺点:增量的binlog文件副本太多,还原会比较的麻烦;
(3)企业场景全量和增量的频率是怎么做的:
1)中小公司,全量一般是一天一次,业务流量低谷时执行全被,备份时会锁表;
2)大公司周备,每周六00点一次全量备份,下周日到周六前都是增量;
3)如何增量:
使用rsync+inotify(rsync+sersync)把所有的binlog备份到远程服务器上;
(4)企业的备份什么时候会派上用场:
1)迁移或者升级数据库时;
2)增加从从库的时候;
3)人为的ddl,dml语句,主从库都没有办法了,因为所有的库都会还行,此时需要备份;
4)跨机房灾备,需要备份到异地;
(5)小结:
我们在生产工作中一般常用一主多从数据库架构,常见的备份方案是在某一个不对外服务的从库上
开启binlog,然后实施定时全备和实时增量备份,保存的周期大于备份的周期;
2、增量恢复:
利用二进制日志和全备进行的恢复过程,被称为增量恢复:
(1)主库或者从库宕机(硬件损坏)是否需要增量恢复:
不需要增量恢复;
主库宕机,只需要把其中一个同步最快的从库切换为主库即可;
从库宕机,直接不用就好了;
(2)人为操作数据库sql语句破坏主库是否需要增量恢复:
需要增量恢复;
在数据库主库内部命令行误操作,会导致所有的数据库(包括主从库)数据的丢失。
列如:在主库执行了'drop database test;'这样的删除语句,这时所有的从库也
会执行这哥'drop database test;'语句,从而导致所有数据库上的test库数据丢失。
(3)只有一个主库是否需要进行增量恢复:
如果公司只有一个主库的情况,首先应该做定一天一次的全量备份及时时的增量
备份。
(4)小结:
1)一般由人为或程序逻辑的方式在数据库执行的sql语句等误操作,才需要增量恢复,因为
此时所有的从库也执行了误操作语句;
2)增量恢复的条件是:存在一份全备加上全备之后的时刻到出现问题的所有增量binlog文件备份;
3)恢复时建议对外停止更新;
4)恢复全量备份,然后把增量日志中有问题的sql语句删除,恢复到数据库;
5)增量恢复的核心思想:
流程制度控制,如果不做,就会面临数据和服务出现故障;
业务需求容忍度,可量化的目标,根据需求选择停库或锁表或者容忍丢失部分数据;
3、备份注意:
备份保存的周期要大于备份的周期;
9.11、mysql增量备份和增量恢复介绍的更多相关文章
- MySQL完全备份、增量备份与恢复[转]
原文链接:http://www.360doc.com/content/11/1209/09/834950_170836197.shtml 场景:每周日执行一次完全备份,每天下午1点执行增量备份 [ 适 ...
- Xtrabackup 增量备份 和 增量还原
目录 测试数据准备 进行全量备份 第一次增量插入一条数据 进行第一次增量备份 注意 第二次增量插入一条数据 进行第二次增量备份 注意 查看xtrabackup_binlog_info中的binlog位 ...
- Mysql binlog备份数据及恢复数据,学会这个,我在也不怕删库跑路啦~
导读 我一直都主张,技多不压身(没有学不会的技术,只有不学习的人),多学一项技能,未来就少求人一次.网上经常听到xxx删库跑路,万一真的遇到了,相信通过今天的学习,也能将数据再恢复回来~~~ 当然啦, ...
- Mysql 一次性备份导出/导入恢复所有数据库
有木有遇到过这种情况?电脑或者服务器需要重装系统?可是你电脑上存着n多个网站的数据库,怎么办?把数据库文件夹拷贝出来,重装系统之后再拷回去?如果你使用了InnoDB引擎,恐怕那样做会出麻烦的,一个一个 ...
- 【转】mysql增量备份恢复实战企业案例
来源地址:http://seanlook.com/2014/12/05/mysql_incremental_backup_example/ 小量的数据库可以每天进行完整备份,因为这也用不了多少时间,但 ...
- Centos 6.5 实战-MySQL定时增量备份(2)
首先在进行增量备份之前需要查看一下配置文件,查看 log_bin 是否开启,因为要做增量备份首先要开启 log_bin .首先,进入到 myslq 命令行,输入如下命令: [root@localhos ...
- 实战-MySQL定时增量备份(2)
概要 引言 增量备份 恢复增量备份 定时备份 引言 在产品上线之后,我们的数据是相当重要的,容不得半点闪失,应该做好万全的准备,搞不好哪一天被黑客入侵或者恶意删除,那就 gg 了.所以要对我们的线上数 ...
- 利用增量备份恢复因归档丢失造成的DG gap
故障现象:data guard归档出现gap,悲剧的是丢失的归档在主库上被rman备份时删除了,丢失的归档大约有20几个,数据库大小约2T,如果重建DG将非常耗时间,因此决定利用增量备份的方式恢复DG ...
- MYSQL数据库自动本地/异地双备份/MYSQL增量备份
构建高安全电子商务网站之(网站文件及数据库自动本地/异地双备份)架构图 继续介绍Linux服务器文件备份,数据库备份,数据安全存储相关的电子商务系统架构.针对安全性有多种多样的解决方案,其中数据备份是 ...
随机推荐
- DNS和BIND
https://www.jianshu.com/p/296b2c7ea76f DNS和BIND 毛利卷卷发关注 0.482018.07.25 10:33:44字数 4,919阅读 4,909 DNS ...
- 对ansible不支持service模块的status命令进行修正
原生的ansible不支持service.status,在Google之后,发现有人提交了一个patch,可以支持status选项.见https://github.com/ritzk/ansible- ...
- shell 读取某个目录下的所有文件
#!/bin/shFILE_PATH="xxx" xxx:路径cd $FILE_PATHfor FILE in `ls` do echo $FILE done
- C语言变量和函数命名规范
C 语言变量和函数命名规范: 关于C语言变量和函数命名规范 据考察,没有一种命名规则可以让所有的程序员赞同,程序设计教科书一般都不指定命名规则.命名规则对软件产品而言并不是"成败悠关&quo ...
- 10.1 ifconfig:配置或显示网络接口信息
ifconfig命令 用于配置网卡IP地址等网络参数或显示当前网络的接口状态,其类似于Windows下的ipconfig命令,这两个命令很容易混淆,读者需要区分一下.此外,ifconfig命令在配置网 ...
- 某SPI设备驱动引起的开关机压力测试死机问题一例
环境 硬件平台:某ARM SoC 软件平台:Linux 问题现象:产品做开关机压力测试,发生死机. 分析 用crash工具解析两次死机dump信息,得到死机前的log如下.两次死机的backtrace ...
- Runtime PM 处理不当导致的 external abort on non-linefetch 案例分享
硬件平台:某ARM SoC 软件平台:Linux 1 Runtime PM 简介 在介绍 Runtime PM 之前,不妨先看看传统的电源管理.传统的电源管理机制,称之为 System PM(Syst ...
- elasticsearch_dsl 操作
import elasticsearch from elasticsearch_dsl import Search, MultiSearch # Search-执行一个搜索,MultiSearch-同 ...
- 5分钟就能学会的简单结构 | MLP-Mixer: An all-MLP Architecture for Vision | CVPR2021
文章转自:微信公众号「机器学习炼丹术」 作者:炼丹兄(欢迎交流,共同进步) 联系方式:微信cyx645016617 论文名称:「MLP-Mixer: An all-MLP Architecture f ...
- TensorFlow简单线性回归
TensorFlow简单线性回归 将针对波士顿房价数据集的房间数量(RM)采用简单线性回归,目标是预测在最后一列(MEDV)给出的房价. 波士顿房价数据集可从http://lib.stat.cmu.e ...