Effective MySQL之备份与恢复
五分钟成为一名DBA
如果我们已经有了一个MySQL生产级系统,而该产品却没有MySQL备份策略,那么我们至少应该做些什么呢?在采取任何备份策略之前,有许多有关数据库大小和存储策略引擎的用法的预备知识需要了解,在执行任何备份方案期间,上述二者对于系统的可用性都会产生直接影响。
本章将讨论在确定一个最小功能性备份时所需的方法,包括:
● 确定数据库的大小
● 确定存储策略引擎的使用
● 锁和宕机带来的影响
1.1 My SQL备份
备份MySQL环境的策略不止一种,它们都取决于MySQL拓扑中服务器的数量。有大量的开源或商业工具软件可用于执行备份。第2章中将对这些策略进行详细讨论。
现在我们要讨论的情形是:环境中只有一台服务器,且需要创建一个一致的备份策略。我们有两个适用于所有MySQL环境的选择方案。第一个就是把MySQL实例停下来,然后对整个文件系统进行冷备份。这样做会导致系统在一段不确定的时间内不可用,还要保证对所有正确的信息都进行了拷贝,这些正确的信息包括:MySQL数据、可用的事务和二进制日志数据,以及当前的MySQL配置。
第二个选择方案是利用标准MySQL安装中所包含的一个客户端工具。使用mysqldump命令可不停止MySQL实例就能够产生一个一致的备份。但在使用mysqldump命令时,需要做出几个重要的决定,以便选定最佳方案。这些决定包括:
● 需要备份的数据库有多大?
● 要生成一个一致性备份,什么锁策略是必需的?
● 备份需要占用多长时间?
.1.1 确定数据库的大小
执行一次MySQL备份时,需要考虑一个重要问题,那就是将MySQL备份到本地磁盘上时,这个备份有多大。需要确保有足够的磁盘空间来存储备份文件。
通过下面的SQL语句,可以得到当前的数据和索引的总大小(以MB为单位):
mysql>SELECT ROUND(SUM(data_length+index_length)/1024/1024)
-> AS total_mb,
-> ROUND(SUM(data_length)/1024/1024)ASdata_mb,
-> ROUND(SUM(index_length)/1024/1024)ASindex_mb
->FROM INFORMATION_SCHEMA.tables;
+----------+---------+----------+
| total_mb | data_mb | index_mb |
+----------+---------+----------+
| 927 | 847 | 80 |
+----------+---------+----------+
执行mysqldump所得的备份的大小大致与数据的大小相同,但为了安全起见,有10%到15%的冗余。这种计算是不精确的,然而,这一备份会产生一个数据的基于文本的输出。例如,一个在数据库中4字节的整数,在mysqldump备份文件中就可能长达10字符字节。在执行备份的同时将备份压缩或传输到另一个不同的网络设备上是可能的,在第2章和第8章中将对它们及相关的限制进行讨论。
执行上述SQL语句得到的数据库中的数据的大小是847MB,后面我们会看到,用通常的默认选项执行mysqldump所得的备份文件的大小是818MB。第8章中的示例数据库的大小是4.5GB,而所产生的备份文件的大小却只有2.9GB。
1.1.2 选择锁策略
所选择的锁策略将决定在执行备份期间,应用程序是否可以对数据库执行写操作。默认情况下,mysqldump利用LOCK TABLES命令进行表级加锁,以便确保所有数据有一个一致的版本。这取决于--lock tables命令行选项,而这一选项在默认状态下是disabled的,它是--opt选项的一部分,而--opt选项在默认状态下是enabled的。我们可以不锁表,但这样一来,就不能保证备份的一致性了。当使用MyISAM存储引擎时,--lock-tables对于确保备份的一致性而言是非常必要的。
反过来,mysqldump提供了--single-transaction选项,它可以为一个单独的事务中所有的表创建一个版本一致的快照。这一选项只有在使用某种支持多版本的存储引擎时才可用。InnoDB是MySQL默认安装时唯一包含的存储引擎。使用这一选项时,它自动关闭--lock-tables。
下面的SQL语句将确认当前MySQL实例所使用的存储引擎:
mysql> SELECT table_schema, engine, COUNT(*) AS tables
->FROM information_schema.tables
-> WHERE table_schema NOT IN
-> ('INFORMATION_SCHEMA','PERFORMANCE_SCHEMA')
->GROUP BY table_schema, engine
->ORDER BY 3 DESC;
+--------------------+--------+--------+
|table_schema |engine | tables |
+--------------------+--------+--------+
|shopping_cart |MyISAM | 109 |
|cust_db |InnoDB | 48 |
|mysql |MyISAM | 21 |
|analytics |InnoDB | 20 |
|phpmyadmin |MyISAM | 8 |
|newsletter |MyISAM | 8 |
|cust_db |MyISAM | 3 |
|mysql |CSV | 2 |
+--------------------+--------+--------+
在本例中,此MySQL实例包含数个不同的支持不同功能的模式(schedule),包括一个购物车、时事新闻和管理工具。一个完整的InnoDB应用具有如下形式:
+--------------------+-------------+-------------+
| table_schema | engine | tables |
+--------------------+-------------+-------------+
| prod_db | InnoDB | 122 |
| mysql | MyISAM | 21 |
| mysql | CSV | 2 |
+--------------------+-------------+-------------+
如本例所示,mysql元模式使用MyISAM,这是无法改变的。如果数据库使用了完整的InnoDB,则将会有两种处理MyISAM的mysql表的选择,本章后续部分将对此进行讨论。
1.1.3 运行时间
确定备份需要消耗多长时间是最重要的需求。没有什么计算方法可以给出精确答案。数据库的大小、系统的RAM的容量、所使用的存储引擎、MySQL的配置、硬盘的速度以及当前的工作负载等都会影响到计算结果。在执行备份时收集这种类型信息的重要意义在于将来要用得到它们。运行时间是重要的,这是因为它是维护数据库的有效窗口。在数据库备份期间,可能会存在应用程序的功能限制、性能开销等,而且备份还可能限制了其他操作,如批处理或软件维护等。
1.1.4 组合信息
下面是一条推荐的SQL语句,它会把所有信息组合起来,以便对数据库大小进行审核:
$cat storage_engines.sql
SELECT table_schema, engine,
ROUND(SUM(data_length+index_length)/1024/1024) AStotal_mb,
ROUND(SUM(data_length)/1024/1024) AS data_mb,
ROUND(SUM(index_length)/1024/1024) AS index_mb,
COUNT(*) AS tables
FROM information_schema.tables
GROUP BY table_schema, engine
ORDER BY 3 DESC;
mysql> source storage_engines.sql
+--------------------+--------+-------+-------+-----+-----+
| table_schema |engine | total_mb | data_mb | index_mb | tables |
+--------------------+--------+-------+-------+-----+-----+
| analytics | InnoDB | 10930 | 10525 | 378 | 20 |
| cust_db | InnoDB | 1155 | 962 | 194 | 48 |
| newsletter | InnoDB | 514 | 278 | 237 | 7 |
| shopping_cart | MyISAM | 27 | 19 | 8 | 109 |
| cust_db | MyISAM | 9 | 3 | 7 | 3 |
| mysql | MyISAM | 1 | 0 | 0 | 21 |
| information_schema | MyISAM | 0 | 0 | 0 | 8 |
| information_schema | MEMORY | 0 | 0 | 0 | 20 |
| mysql | CSV | 0 | 0 | 0 | 2 |
+--------------------+--------+-------+-------+-----+-----+
Effective MySQL之备份与恢复的更多相关文章
- MySQL的备份与恢复
Linux下的mysql的备份与恢复 备份: 比如我们要备份mysql中已经存在的名为linux的数据库,要用到命令mysqldump 命令格式如下: [root@linuxsir01 root]# ...
- MySQL增量备份与恢复实例【转】
小量的数据库可以每天进行完整备份,因为这也用不了多少时间,但当数据库很大时,就不太可能每天进行一次完整备份了,这时候就可以使用增量备份.增量备份的原理就是使用了mysql的binlog日志.本次操作的 ...
- Mysql 数据备份与恢复,用户创建,授权
Mysql 数据备份与恢复,用户创建,授权 1. Mysqldump >outfile.sql 2. Mysql –uxxx –pxxx < backfile.sql 3. Create ...
- 2020重新出发,MySql基础,MySql数据库备份与恢复
@ 目录 MySQL数据库备份与恢复 数据库为什么需要备份 MySQL备份类型 MySQL热备份及恢复 逻辑备份 mysqldump SELECT INTO-OUTFILE mydumper 裸文件备 ...
- MySQL的备份与恢复理解与备份策略
MySQL的备份主要分为逻辑备份和物理备份 逻辑备份 在MySQL中逻辑备份的最大优点是对各种存储引擎都可以用同样的方法来备份.而物理备份则不同,不同的存储引擎有着不同的备份方法.Mysql中的逻辑备 ...
- MySQL的备份与恢复具体解释
MySQL数据备份 在mySQL里面,有逻辑备份和物理备份.逻辑备份最大长处是对于各种存储引擎,都能够使用相同的方法来备份. 而物理备份则不同.不同的存储引擎有着不同的备份方法. 逻辑备份与恢复 备份 ...
- MYSQL的备份与恢复--逻辑备份mysqldump
目录 0.备份与恢复概述 1.逻辑备份-完整备份与恢复 2.逻辑备份-增量备份与恢复 (1)环境准备 (2)恢复全量数据 (3)恢复增量备份 3.新来的开发妹子删了库! (1)模拟环境准备 (2)全备 ...
- MYSQL的备份与恢复--物理备份xrabackup
目录 1.数据库完整备份与恢复 (1)环境准备 (2)完全备份恢复流程 2.数据库增量备份与恢复 (1)增量和差异概述 (2)增量备份和恢复 3.数据库差异备份与恢复 4.简单命令进行物理备份 5.实 ...
- Mysql—数据备份与恢复
数据备份 # 备份单个数据库 [root@localhost ~]# mysqldump -h主机名 -u用户名 -p密码 数据库名字 > 备份的数据库名字.sql [root@localhos ...
随机推荐
- aps.net要掌握的技术
Spring.Net.NHibernate.Entity Framework.ASP.Net MVC.HTML5.WCF.数据库集群.分布式应用集群.高性能读写NoSql
- 微软build 2015
1.apple Object-C项目和安卓项目经过移植可以运行在windows上,演示看起来有些卡. 2.平台大统一,Universal Windows App,10亿台设备,这个很重要,以后恐怕离不 ...
- sql 查询结果中加入空值列
select a,b,c,''d from X; 其中d为新加列,''表示默认值为空值 原文:http://hi.baidu.com/ddduggguo/item/747d5ba5ca18fd2689 ...
- 搭建C#框架 博文观感
最近刚开始着手做项目,在后期开发的时候遇到不少预期之外的问题,而且工期也超出预算不少.反思了一下,主要是做的项目少,前期需求分析不明朗,当然对于框架也没有意识.凡此种种.当然,遇到问题就要去想办法解决 ...
- Could not lock surface java.lang.IllegalArgumentException
08-07 14:46:33.795: E/Surface(4927): dequeueBuffer failed (Invalid argument) 08-07 14:46:33.800: E/V ...
- 防抖(Debouncing)和节流(Throttling)
onscoll防抖封装函数 scroll 事件本身会触发页面的重新渲染,同时 scroll 事件的 handler 又会被高频度的触发, 因此事件的 handler 内部不应该有复杂操作,例如 DOM ...
- 诞生于饭桌上的jcSQL语言
相信每个Coder都有心在自己求学阶段可以写一门自己的语言,无论是毕业设计,还是课余爱好:不管是为了提升B格,还是想练手,抑或对其他语言不满,想自己撸一个,只要坚持下去了,都是不错的理由. 现在正值暑 ...
- Linux下面如何运行.sh文件
Linux下面如何运行.sh文件 本文介绍Linux下面用命令如何运行.sh文件的方法,有两种方法: 一.直接./加上文件名.sh,如运行hello.sh为./hello.sh[hello.sh必 ...
- 车间任务不允许"每个装配件"超过100000
应用 Oracle Work in Progress 层 Level Function 函数名 Funcgtion Name WIP_WIPMRMDF 表单名 Form Name WIPMRMDF ...
- RedHat Enterprise Linux 6.3 安装Oracle Database 11g
按照以下文章正确将oracle安装在linux上 http://yiyiboy2010.iteye.com/blog/1670795 http://mirrors.163.com/centos/6.5 ...