在线热备份数据库之innobackupex 增量备份InnoDB
在线热备份数据库之innobackupex 增量备份InnoDB
什么是增量备份?其原理是什么?
增量备份是基于上一次备份后对新增加的内容进行备份,优点相较于完整备份而言备份内容少时间短,能够节省磁盘空间。但相较于完整备份而言可靠性有所降低,不能缺失基于完整备份的增量备份区间备份包,建议完整备份区间时间不可大于一周,通常情况下如果数据库非常庞大个人建议三天到七天完整备份一次,期间每天进行增量备份。如果数据库小那么每天进行完整备份才是最安全的选择。
增量备份原理是什么?他是如何记录上次备份的位置?
首先在InnoDB中, 每个page中都记录LSN信息,每当相关数据发生改变,page的LSN就会自动增加,xtrabackup的增量备份就是依据这一原理进行的。 我们增量备份必须要基于完整备份的前提下,在完整备份后会在备份目录中生成一个xtrabackup_checkpoints文件中记录了to_lsn= xxxx,下次备份就会从这里开始到结束,每次增量备份都需要指定上一次的增量备份的目录名,所以每次都从结束进行增量备份,恢复时将完整备份和增量备份1合并再与增量备份2合并再与增量备份N合并直到最后一次增量合并完成后,那么得到的就是完整备份数据,再进行完整数据的恢复。
先对我的数据库做一次完整备份,不指定任何数据库也不使用时间最为备份子目录名。
innobackupex -uroot -p12345 --user root --password 12345 /fullbackup --no-timestamp
模拟创建新库新表模拟用户产生数据。
mysql -uroot -p12345 -e "create database new1;"
mysql -uroot -p12345 -e "create table new1.newtable1 (id int(10));"
for i in {1..100};do mysql -uroot -p12345 -e "insert into new1.newtable1 values($i);" ;done
然后进行增量备份,需要指定 --incremental 进行增量备份的目录 和 --incremental-basedir 完整备份的目录。
innobackupex --user root --password 12345 --incremental /increback --incremental-basedir /fullbackup --no-timestamp
然后再进行模拟用户向新创建的表产生数据。
for i in {101..201};do mysql -uroot -p12345 -e "insert into new1.newtable1 values($i);" ;done
然后再使用增量备份进行备份,这里需要注意的就是--incremental-basedir指定的目录就是上一次增量备份的目录了。
innobackupex --user root --password 12345 --incremental /increback2 --incremental-basedir /increback --no-timestamp
因为去比较上一次备份的结束位置进行新的备份,看一下第一次到最后一次增量备份的位置。
---------从0备份到4158368-----------------------------------------
backup_type = full-backuped
from_lsn = 0
to_lsn = 4158368
last_lsn = 4158377
compact = 0
recover_binlog_info = 0
---------从4158368备份到4197299-----------------------------------
backup_type = incremental
from_lsn = 4158368
to_lsn = 4197299
last_lsn = 4197308
compact = 0
recover_binlog_info = 0
--------从4197299备份到4232734------------------------------------
backup_type = incremental
from_lsn = 4197299
to_lsn = 4232734
last_lsn = 4232743
compact = 0
recover_binlog_info = 0
----------------------------------------------------------------
#就和之前说的一样每次备份完成后的重点都是下一次备份的起点。
开是准备恢复数据(一般情况下恢复到另外一台机器上去,然后备份区间丢失的部分数据通过binlog进行恢复,我这边就备份相关文件,直接删掉目录进行恢复了。)
第一件事就是将完整备份与第一次增量备份合并再与第二次增量备份合并再与第N次增量备份合并。
innobackupex --apply-log --redo-only /fullbackup
innobackupex --apply-log --redo-only /fullbackup --incremental-dir /increback
innobackupex --apply-log --redo-only /fullbackup --incremental-dir /increback2
整合备份后将数据库服务停掉打包数据库默认路径下的所有文件备份到其/home目录去然后删掉下面所有的东西。
systemctl stop mysqld && tar -zcvPf /home/mysqldatadir.tar.gz /var/lib/mysql && rm -rf /var/lib/mysql/*
然后进行拷贝恢复。
innobackupex --copy-back /fullbackup/
因为是使用root用户操作的所有属主和属组都是root,所以需要改为mysql。
chown -R mysql:mysql /var/lib/mysql
启动服务并检查数据是否正常。
systemctl start mysqld
mysql -uroot -p12345 -e "select * from new1.newtable1;"
期间出现的部分数据丢失可以通过结合binlog进行恢复。
在线热备份数据库之innobackupex 增量备份InnoDB的更多相关文章
- 在线热备份数据库之innobackupex 完整备份InnoDB
在线热备份数据库innobackupex 完整备份InnoDB XtraBackup xtrabackup C程序,支持InnoDB/XtraDB innobackupex : 以Perl脚本封装xt ...
- MySQL数据库如何实现增量备份
1 .通过SHOW VARIABLES LIKE '%log_bin%';查看数据库是否开启增量备份log_bin=ON则为开启log_bin=OFF则为关闭 2 .修改mysql配置文件mysql. ...
- xtrabackup之Innobackupex增量备份及恢复
演示增量备份 #启动一个全备 innobackupex \ > --defaults-/my.cnf \ > --host=127.0.0.1 \ > --user=xtrabk \ ...
- MySQL5.7.18 备份、Mysqldump,mysqlpump,xtrabackup,innobackupex 全量,增量备份,数据导入导出
粗略介绍冷备,热备,温暖,及Mysqldump,mysqlpump,xtrabackup,innobackupex 全量,增量备份 --备份的目的 灾难恢复:意外情况下(如服务器宕机.磁盘损坏等)对损 ...
- Centos 6.9 安装xtrabackup-2.4.8 通用包,yum安装,全量备份,增量备份
xtrabackup-2.4.8的安装及使用 Xtrabackup是由percona提供的mysql数据库备份工具,据官方介绍,这也是世界上惟一一款开源的能够对innodb和xtradb数据库进行热备 ...
- Xtrabackup全量 增量备份详解
xtrabackup是Percona公司CTO Vadim参与开发的一款基于InnoDB的在线热备工具,具有开源,免费,支持在线热备,备份恢复速度快,占用磁盘空间小等特点,并且支持不同情况下的多种备份 ...
- xtra+binlog增量备份脚本
目录 一.备份原理 innobackupex原理 binlog原理 特点 备份策略 二.环境准备 开启binlog 创建授权用户 安装innobackupex 三.添加脚本 全量备份 增量备份 bin ...
- xtrabackup实现全量备份和增量备份
mysql增量和完全备份innobackupex2.1.9版本1 yum安装: 官网地址:https://www.percona.com/doc/percona-xtrabackup/LATEST/i ...
- 12C-使用跨平台增量备份减少可移动表空间的停机时间 (Doc ID 2005729.1)
12C - Reduce Transportable Tablespace Downtime using Cross Platform Incremental Backup (Doc ID 20057 ...
随机推荐
- B/S 端构建的基于 WebGL 3D 可视化档案馆管理系统
前言 档案管理系统是通过建立统一的标准以规范整个文件管理,包括规范各业务系统的文件管理的完整的档案资源信息共享服务平台,主要实现档案流水化采集功能.为企事业单位的档案现代化管理,提供完整的解决方案,档 ...
- Django学习之model进阶
一 QuerySet 可切片 使用Python 的切片语法来限制查询集记录的数目 .它等同于SQL 的LIMIT 和OFFSET 子句. >>> Entry.objects.al ...
- JAVA-JDBC-c3p0连接池配置
配置c3p0数据源的方式有三种,分别是手动配置,xml文件配置和properties文件配置,这三种配置方式存在一种即可. 通常来讲,用文件配置更方便书写和阅读 配置如下: 注:*号部分写自己的配置 ...
- 理解LSTM网络--Understanding LSTM Networks(翻译一篇colah's blog)
colah的一篇讲解LSTM比较好的文章,翻译过来一起学习,原文地址:http://colah.github.io/posts/2015-08-Understanding-LSTMs/ ,Posted ...
- JPG和PNG特性分析及适用范围
个人博客: http://mcchen.club JPG的特性 ----有损压缩 1.支持摄影图像或写实图像的高级压缩,并且可利用压缩比例控制图像文件大小. 2.有损压缩会使图像数据质量下降,并且 ...
- Android 世界中,谁喊醒了 Zygote ?
本文基于 Android 9.0 , 代码仓库地址 : android_9.0.0_r45 文中源码链接: SystemServer.java ActivityManagerService.java ...
- 从源码角度看JedisPoolConfig参数配置
做一个积极的人 编码.改bug.提升自己 我有一个乐园,面向编程,春暖花开! 你好,JedisPoolConfig Java中使用Jedis作为连接Redis的工具.在使用Jedis的也可以配置Jed ...
- Podman 使用指南
原文链接:Podman 使用指南 Podman 原来是 CRI-O 项目的一部分,后来被分离成一个单独的项目叫 libpod.Podman 的使用体验和 Docker 类似,不同的是 Podman 没 ...
- Springboot 系列(十四)迅速启用 HTTPS 加密你的网站
1. 获取 HTTPS 证书 正常情况下 HTTPS 证书需要从证书授权中心获得,这样获得的证书才具有公信力,也会被各种浏览器客户端所认可.常见的证书品牌如 Symantec,GeoTrustm,Tr ...
- PowerUp攻击模块实战
PowerUp攻击模块实战 1.将PowerUp.ps1脚本上传至目标服务器,然后在本地执行 2.使用IEX在内存中加载此脚本,执行以下命令,脚本将进行所有的检查. powershell.exe ...