事件背景

  1. MySQL数据库每日零点自动全备
  2. 某天上午9点,二狗子不小心drop了一个数据库
  3. 我们需要通过全备的数据文件,以及增量的binlog文件进行数据恢复

主要思想与原理

  1. 利用全备的sql文件中记录的CHANGE MASTER语句,binlog文件及其位置点信息,找出binlog文件增量的部分
  2. mysqlbinlog命令将上述的binlog文件导出为sql文件,并剔除其中的drop语句
  3. 通过全备文件和增量binlog文件的导出sql文件,就可以恢复到完整的数据

过程示意图

操作过程

  1. 模拟数据
  2. CREATE TABLE `student` (
  3. `id` int(11) NOT NULL AUTO_INCREMENT,
  4. `name` char(20) NOT NULL,
  5. `age` tinyint(2) NOT NULL DEFAULT '0',
  6. PRIMARY KEY (`id`),
  7. KEY `index_name` (`name`)
  8. ) ENGINE=InnoDB AUTO_INCREMENT=8 DEFAULT CHARSET=utf8
  9. mysql> insert student values(1,'zhangsan',20);
  10. mysql> insert student values(2,'lisi',21);
  11. mysql> insert student values(3,'wangwu',22);
  12. 全备命令
  13. # mysqldump -uroot -p -B -F -R -x --master-data=2 test|gzip >/server/backup/test_$(date +%F).sql.gz
  14. 参数说明:
  15. -B 指定数据库
  16. -F 刷新日志
  17. -R 备份存储过程等
  18. -x 锁表
  19. --master-data 在备份语句里添加CHANGE MASTER语句以及binlog文件及位置点信息
  20. 继续插入数据并删库
  21. mysql> insert student values(4,'xiaoming',20);
  22. mysql> insert student values(5,'xiaohong',20);
  23. 在插入数据的时候我们模拟误操作,删除test数据库。
  24. mysql> drop database test;
  25. 此时,全备之后到误操作时刻之间,用户写入的数据在binlog中,需要恢复出来。
  26. 查看全备之后新增的binlog文件
  27. # cd /server/backup/
  28. # ls
  29. test_2020-08-19.sql.gz
  30. # gzip -d test_2020-08-19.sql.gz
  31. # grep CHANGE test_2020-08-19.sql
  32. -- CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.000003', MASTER_LOG_POS=107;
  33. 这是全备时刻的binlog文件位置,即mysql-bin.000003107行,因此在该文件之前的binlog文件中的数据都已经包含在这个全备的sql文件中了
  34. 移动binlog文件,并读取sql,剔除其中的drop语句
  35. # cp /data/3306/mysql-bin.000003 /server/backup/
  36. # mysqlbinlog -d test mysql-bin.000003 >mysql-bin.000003.sql
  37. 接下来,使用vim编辑mysql-bin.000003.sql文件,剔除drop语句
  38. 注意:在恢复全备数据之前必须将该binlog文件移出,否则恢复过程中,会继续写入语句到binlog,最终导致增量恢复数据部分变得比较混乱
  39. 恢复数据
  40. # mysql -uroot -p < test_2020-08-19.sql
  41. # mysql -uroot -p -e "select * from test.student;"
  42. +----+----------+-----+
  43. | id | name | age |
  44. +----+----------+-----+
  45. | 1 | zhangsan | 20 |
  46. | 2 | lisi | 21 |
  47. | 3 | wangwu | 22 |
  48. +----+----------+-----+
  49. 此时恢复了全备时刻的数据,然后使用mysql-bin.000003.sql文件恢复全备时刻到删除数据库之间,新增的数据。
  50. # mysql -uroot -p test < mysql-bin.000003.sql
  51. # mysql -uroot -p -e "select * from test.student;"
  52. +----+----------+-----+
  53. | id | name | age |
  54. +----+----------+-----+
  55. | 1 | zhangsan | 20 |
  56. | 2 | lisi | 20 |
  57. | 3 | wangwu | 20 |
  58. | 4 | xiaoming | 20 |
  59. | 5 | xiaohong | 20 |
  60. +----+----------+-----+
  61. 此时,整个恢复过程结束,是不是很简单呢?没错,就是这么简单!!
  62. # 总结
  63. 适合人为SQL语句造成的误操作或者没有主从复制等的热备情况宕机时的修复。
  64. 恢复条件要全备和增量的所有数据。
  65. 恢复时建议对外停止更新,即禁止更新数据库。
  66. 先恢复全量,然后把全备时刻点以后的增量日志,按顺序恢复成SQL文件,然后把文件中有问题的SQL语句删除(也可通过时间和位置点),再恢复到数据库。

MySQL手动恢复数据库测试操作的更多相关文章

  1. mysql备份恢复数据库据/表

    备份单个数据库,只备份表,如要恢复,必须先创建一个数据库[root@s]# mysqldump -u root -p dbname1 > dbname1.sql[root@s]# mysql - ...

  2. brent ozar的sqlserver dba训练课程翻译——第二章:手动恢复数据库

    备份的唯一原因 备份的唯一原因是我们可以还原   当我第一次成为sqlserver数据库管理员,只要备份工作都能成功运行,我就会觉得一切都很好.我会查看sqlserver代理,保证那些作业都在运行,然 ...

  3. MySql数据库 - 3.利用MySql Workbench 对数据库进行操作

    打开MySql Workbench 选择呢一个数据库 查看数据库: 创建数据库 在SCHEMAS下的空白位置右键 - 选择 Create Schema... 如果数据库名字中有大写字母,会出现如下提示 ...

  4. (转)mysql5.7 根据二进制文件mysqlbinlog恢复数据库 Linux

    原文:http://blog.csdn.net/qq_15058425/article/details/61196085 1.开始mysqlbinlog日志功能 先找打my.cnf文件的位置: 2.编 ...

  5. 误删数据库怎么办?mysql 回滚,撤销操作,恢复数据

    刚刚不小心把数据库删掉了,于是想着上网上找找有没有可以恢复数据库的方法,没想到还真有,除了备份以外,还有以下方法. 在mysql有时执行了错误的update或者delete时导致大量数据错误恢复的办法 ...

  6. MySQL Cluster-备份恢复初步测试

    参考文档   http://blog.chinaunix.net/uid-20639775-id-1617795.html  http://xxtianxiaxing.iteye.com/blog/5 ...

  7. zabbix数据库mariadb从服务器迁移到云mysql数据库的操作

    zabbix数据库mariadb从本机迁移到云mysql数据库的操作 1.将zabbix数据库导出,并导入到云数据库中 由于数据库较大,如果直接使用shell会话中断会导致数据库导出或者导入失败,使用 ...

  8. MySQL使用二进制日志恢复数据库

    一.二进制日志简介 MySQL有不同类型的日志,其中二进制文件记录了所有对数据库的修改,如果数据库因为操作不当或其他原因丢失了数据,可以通过二进制文件恢复. 在my.ini文件中设置了log-bin, ...

  9. DBA必备:MySQL数据库常用操作和技巧

    DBA必备:MySQL数据库常用操作和技巧 2011-02-25 15:31 kaduo it168 字号:T | T MySQL数据库可以说是DBA们最常见和常用的数据库之一,为了方便大家使用,老M ...

随机推荐

  1. docker安装confluence

    目录 一.docker安装 二.破解 三.配置mysql数据库 四.域名配置 五.参考 一.docker安装 1.安装镜像 docker pull atlassian/confluence-serve ...

  2. 跟我读论文丨Multi-Model Text Recognition Network

    摘要:语言模型往往被用于文字识别的后处理阶段,本文将语言模型的先验信息和文字的视觉特征进行交互和增强,从而进一步提升文字识别的性能. 本文分享自华为云社区<Multi-Model Text Re ...

  3. 算法竞赛进阶指南0x36组合计数

    概述 AcWing211. 计算系数 #include <bits/stdc++.h> using namespace std; const int mod = 10007 ; int k ...

  4. 在Centos下对高并发web框架Tornado的性能进行测试

    原文转载自「刘悦的技术博客」https://v3u.cn/a_id_89 在之前的一篇文章中,我们在1g1核的惨淡硬件环境下,对 uwsgi + django 和 gunicorn+ django 的 ...

  5. 利用DockerHub在Centos7.7环境下部署Nginx反向代理Gunicorn+Flask独立架构

    原文转载自「刘悦的技术博客」https://v3u.cn/a_id_165 上一篇文章:Docker在手,天下我有,在Win10系统下利用Docker部署Gunicorn+Flask打造独立镜像,是在 ...

  6. 附加进程 到远程服务器中Docker容器内 调试

    很多时候,我们在本地开发过程中程序运行很正常,但是发布到线上之后由于环境的原因,可能会有一些异常.通常我们会通过日志来分析问题,除了日志还有一种常用的调试手段就是:附加进程. VS中的附加进程非常强大 ...

  7. 一文带你了解webrtc基本原理(动手实现1v1视频通话)

    webrtc (Web Real-Time Communications) 是一个实时通讯技术,也是实时音视频技术的标准和框架. 大白话讲,webrtc是一个集大成的实时音视频技术集,包含了各种客户端 ...

  8. 金秋十月 - Apache DolphinScheduler 收获 2 位新 Committer

    点击上方蓝字关注 Apache DolphinScheduler Apache DolphinScheduler(incubating),简称"DS", 中文名 "海豚调 ...

  9. Linux 06 用户组管理

    参考源 https://www.bilibili.com/video/BV187411y7hF?spm_id_from=333.999.0.0 版本 本文章基于 CentOS 7.6 概述 每个用户都 ...

  10. 1、spingIOC+IDEA+Maven

    1.先配置spring.springmvc通用xml文件的头部信息 spring.springmvc通用xml文件的模板内容如下: 1 <?xml version="1.0" ...