在线热备份数据库之innobackupex 增量备份InnoDB

什么是增量备份?其原理是什么?

增量备份是基于上一次备份后对新增加的内容进行备份,优点相较于完整备份而言备份内容少时间短,能够节省磁盘空间。但相较于完整备份而言可靠性有所降低,不能缺失基于完整备份的增量备份区间备份包,建议完整备份区间时间不可大于一周,通常情况下如果数据库非常庞大个人建议三天到七天完整备份一次,期间每天进行增量备份。如果数据库小那么每天进行完整备份才是最安全的选择。

增量备份原理是什么?他是如何记录上次备份的位置?

首先在InnoDB中, 每个page中都记录LSN信息,每当相关数据发生改变,page的LSN就会自动增加,xtrabackup的增量备份就是依据这一原理进行的。 我们增量备份必须要基于完整备份的前提下,在完整备份后会在备份目录中生成一个xtrabackup_checkpoints文件中记录了to_lsn= xxxx,下次备份就会从这里开始到结束,每次增量备份都需要指定上一次的增量备份的目录名,所以每次都从结束进行增量备份,恢复时将完整备份和增量备份1合并再与增量备份2合并再与增量备份N合并直到最后一次增量合并完成后,那么得到的就是完整备份数据,再进行完整数据的恢复。

  • 先对我的数据库做一次完整备份,不指定任何数据库也不使用时间最为备份子目录名。

    innobackupex -uroot -p12345 --user root --password 12345 /fullbackup --no-timestamp
  • 模拟创建新库新表模拟用户产生数据。

    mysql -uroot -p12345 -e "create database new1;"
    mysql -uroot -p12345 -e "create table new1.newtable1 (id int(10));"
    for i in {1..100};do mysql -uroot -p12345 -e "insert into new1.newtable1 values($i);" ;done
  • 然后进行增量备份,需要指定 --incremental 进行增量备份的目录 和 --incremental-basedir 完整备份的目录。

    innobackupex --user root --password 12345 --incremental /increback --incremental-basedir /fullbackup --no-timestamp
  • 然后再进行模拟用户向新创建的表产生数据。

    for i in {101..201};do mysql -uroot -p12345 -e "insert into new1.newtable1 values($i);" ;done
  • 然后再使用增量备份进行备份,这里需要注意的就是--incremental-basedir指定的目录就是上一次增量备份的目录了。

    innobackupex --user root --password 12345 --incremental /increback2 --incremental-basedir /increback --no-timestamp
  • 因为去比较上一次备份的结束位置进行新的备份,看一下第一次到最后一次增量备份的位置。

    ---------从0备份到4158368-----------------------------------------
    backup_type = full-backuped
    from_lsn = 0
    to_lsn = 4158368
    last_lsn = 4158377
    compact = 0
    recover_binlog_info = 0
    ---------从4158368备份到4197299-----------------------------------
    backup_type = incremental
    from_lsn = 4158368
    to_lsn = 4197299
    last_lsn = 4197308
    compact = 0
    recover_binlog_info = 0
    --------从4197299备份到4232734------------------------------------
    backup_type = incremental
    from_lsn = 4197299
    to_lsn = 4232734
    last_lsn = 4232743
    compact = 0
    recover_binlog_info = 0
    ----------------------------------------------------------------
    #就和之前说的一样每次备份完成后的重点都是下一次备份的起点。
  • 开是准备恢复数据(一般情况下恢复到另外一台机器上去,然后备份区间丢失的部分数据通过binlog进行恢复,我这边就备份相关文件,直接删掉目录进行恢复了。

  • 第一件事就是将完整备份与第一次增量备份合并再与第二次增量备份合并再与第N次增量备份合并。

    innobackupex --apply-log --redo-only /fullbackup
    innobackupex --apply-log --redo-only /fullbackup --incremental-dir /increback
    innobackupex --apply-log --redo-only /fullbackup --incremental-dir /increback2
  • 整合备份后将数据库服务停掉打包数据库默认路径下的所有文件备份到其/home目录去然后删掉下面所有的东西。

    systemctl stop mysqld && tar -zcvPf /home/mysqldatadir.tar.gz /var/lib/mysql && rm -rf /var/lib/mysql/*
  • 然后进行拷贝恢复。

    innobackupex --copy-back /fullbackup/
  • 因为是使用root用户操作的所有属主和属组都是root,所以需要改为mysql。

    chown -R  mysql:mysql /var/lib/mysql
  • 启动服务并检查数据是否正常。

    systemctl start mysqld
    mysql -uroot -p12345 -e "select * from new1.newtable1;"
  • 期间出现的部分数据丢失可以通过结合binlog进行恢复。

在线热备份数据库之innobackupex 增量备份InnoDB的更多相关文章

  1. 在线热备份数据库之innobackupex 完整备份InnoDB

    在线热备份数据库innobackupex 完整备份InnoDB XtraBackup xtrabackup C程序,支持InnoDB/XtraDB innobackupex : 以Perl脚本封装xt ...

  2. MySQL数据库如何实现增量备份

    1 .通过SHOW VARIABLES LIKE '%log_bin%';查看数据库是否开启增量备份log_bin=ON则为开启log_bin=OFF则为关闭 2 .修改mysql配置文件mysql. ...

  3. xtrabackup之Innobackupex增量备份及恢复

    演示增量备份 #启动一个全备 innobackupex \ > --defaults-/my.cnf \ > --host=127.0.0.1 \ > --user=xtrabk \ ...

  4. MySQL5.7.18 备份、Mysqldump,mysqlpump,xtrabackup,innobackupex 全量,增量备份,数据导入导出

    粗略介绍冷备,热备,温暖,及Mysqldump,mysqlpump,xtrabackup,innobackupex 全量,增量备份 --备份的目的 灾难恢复:意外情况下(如服务器宕机.磁盘损坏等)对损 ...

  5. Centos 6.9 安装xtrabackup-2.4.8 通用包,yum安装,全量备份,增量备份

    xtrabackup-2.4.8的安装及使用 Xtrabackup是由percona提供的mysql数据库备份工具,据官方介绍,这也是世界上惟一一款开源的能够对innodb和xtradb数据库进行热备 ...

  6. Xtrabackup全量 增量备份详解

    xtrabackup是Percona公司CTO Vadim参与开发的一款基于InnoDB的在线热备工具,具有开源,免费,支持在线热备,备份恢复速度快,占用磁盘空间小等特点,并且支持不同情况下的多种备份 ...

  7. xtra+binlog增量备份脚本

    目录 一.备份原理 innobackupex原理 binlog原理 特点 备份策略 二.环境准备 开启binlog 创建授权用户 安装innobackupex 三.添加脚本 全量备份 增量备份 bin ...

  8. xtrabackup实现全量备份和增量备份

    mysql增量和完全备份innobackupex2.1.9版本1 yum安装: 官网地址:https://www.percona.com/doc/percona-xtrabackup/LATEST/i ...

  9. 12C-使用跨平台增量备份减少可移动表空间的停机时间 (Doc ID 2005729.1)

    12C - Reduce Transportable Tablespace Downtime using Cross Platform Incremental Backup (Doc ID 20057 ...

随机推荐

  1. [UWP] 解决FlipView图片放大的诡异bug

    想要实现图片的放大缩小可以通过在Image外面套一个ScrollViewer,然后设置ScrollViewer的ZoomMode="Enabled" <FlipView It ...

  2. 定期从Docker上部署的MySQL备份数据

    前段时间公司停电,正巧赶上周一领导要开会要过一遍项目,然而项目所依赖的MySQL数据库是直接部署在宿主机,且因为各人部署方式不同的原因,花了很久才在开会前启动起来.于是开完会后,我第一件事就是把原先依 ...

  3. KafkStream架构

    Kafka Stream 的整体架构图如下. 目前KafkaStream的数据源智能是如上图所示的Kafka,但是处理结果并不一定是如上图所示的输出到Kafka,实际上KStream和Ktable的实 ...

  4. 什么是javascript字面量,常量,变量,直接量?

    1.字面量是变量的字符串表示形式.它不是一种值,而是一种变量记法. var a = 1 //1是字面量 var b = 'css' //css是字面量 var c = [5,6,7] //567是字面 ...

  5. C# 创建自定义配置节点1

    转载:http://www.educity.cn/develop/495003.html 在.Net应用程序中我们经常看到VS为我们生成的项目工程中都会含有app.config或者web.connfi ...

  6. SQL server数据库系统部分常用的存储过程及说明

    --SQL server数据库系统常用的存储过程 exec sp_databases --能看到所有具有权限的数据库名,大小和备注 exec sp_helpdb --数据库名,大小,管理员,创建时间状 ...

  7. 从源码角度看JedisPoolConfig参数配置

    做一个积极的人 编码.改bug.提升自己 我有一个乐园,面向编程,春暖花开! 你好,JedisPoolConfig Java中使用Jedis作为连接Redis的工具.在使用Jedis的也可以配置Jed ...

  8. npm install bcrypt报错

    gyp ERR! stack Error: Can't find Python executable "python", you can set the PYTHON env va ...

  9. Python3+PyCharm+PyQt5配置进行GUI开发

    一.安装Python3.5以上版本. 链接:https://www.python.org/downloads/windows/ 二.安装PyQt5. 使用pip安装:1.进入 C:\Users\你的计 ...

  10. My Idea About ID wly_sh (关于用户名 wly_sh 的猜想)

    I Wanna Say Is That- There's a guy called wsh in our computer room. That guy registered a blog in CS ...