第四章:MySQL数据库的备份与恢复                
     
     2016-09-30 00:58:05

标签:数据库备份 工作原理 数据库表 mysql source

原创作品,允许转载,转载时请务必以超链接形式标明文章 原始出处 、作者信息和本声明。否则将追究法律责任。http://zhaoyulin.blog.51cto.com/11665101/1857972

目录

1. 备份数据的意义

2. 数据库备份... 1

2.1 备份单个数据库练习多种参数使用... 1

2.1 mysqldump的工作原理... 8

.3. 数据库备份实践... 9

3.1 备份多个库... 9

3.2 分库备份... 10

3.3 备份单表及分表备份... 11

3.4 备份多个表... 13

3.5 备份数据库表结构(不包含数据)... 13

3.6 备份表中数据... 14

3.7 小结... 15

3.8 刷新binlog的参数... 15

3.9 mysqldump的关键参数说明... 16

4. 生产场景不同引擎mysqldump备份命令... 18

5. 恢复数据库实践... 18

5.1 数据库恢复事项... 18

5.2 利用source命令恢复数据库... 18

5.3 利用mysql命令恢复(标准)... 20

5.4 针对压缩的备份文件恢复数据... 22

6. 实现和mysql非交互式对话... 23

6.1 利用mysql –e 参数查看mysql数据库... 23

6.2 利用mysql -e参数查看mysql变量及性能状态... 24

6.3 不重启数据库修改数据库参数... 25

6.4 生产场景常用重要命令小结... 26

7. mysqladmin命令

1. 备份数据的意义

经常有网友问,运维工作到底是什么工作,到底做什么?其实,运维工作简单的概括就两件事,第一个是保护公司的数据,第二个是网站7*24小时提供服务。

而对于数据和网站7*24小时提供服务那个跟重要呢?

这个具体要看业务和公司。

例如:银行,金融行业,数据是最重要的,一条都不能丢,可能宕机停机影响就没那么大。

再例如:百度搜索,腾讯qq聊天记录丢失几万条数据,都不算啥。

对于数据来讲,数据最核心的就是数据库核数据,当然也包括其他数据,以下主要讲解的是数据库的数据。

对于绝大数企业来讲,时区数据就时区商机,时区产品,时区客户,公司倒闭…….,因此,数据库的备份与恢复就显得十分重要了。

备份的两种方式:

1. 逻辑备份:以SQL语句的形式,将数据导出,速度慢,跨平台,跨版本,可以跨软件。

2. 物理备份,直接对数据文件备份,cp tar,速度快,不容易跨平台、跨版本。跨软件,常用方法:         linux备份工具(cp tar)。

3. xtrabackup

2. 数据库备份

2.1 备份单个数据库练习多种参数使用

mysql数据库自带了一个很好用的备份命令,就是mysqldump,它的基本使用如下:

  • 命令语法:mysqldump -u 用户名-p密码 数据库名 > 备份的文件名

如下5个范例目录:

(1)备份名字为oldboy数据库

(2)解决备份文件乱码问题

(3)利用上述备份数据进行回复测试

(4)备份时使用-B参数和不适用-B参数的区别及两种备份方法。

(5)优化使用—compact参数使备份文件不输出注释,优化空间。

(6)指定压缩命令压缩备份的MySQL数据

范例操作如下:

(1)范例1:备份名字为oldboy的库


1. 备份前查看oldboy数据

[root@db01 /]# mysql -U -uroot -poldboy123 -S /data/3306/mysql.sock
--------
    ---------
mysql> show databases; 
+---------------------+
| Database            |
+---------------------+
| information_schema  |
| mysql               |
| oldboy              |
+---------------------+
6 rows in set (0.00 sec) mysql> use oldboy
Database changed mysql> show tables; 
+------------------+
| Tables_in_oldboy |
+------------------+
| student          |
| test             |
+------------------+
2 rows in set (0.00sec) mysql> select * from test; 
+------+---------+
| id   | name    |
+------+---------+
|  3   | hehe    |
|  5   | kaka    |
|  1   |oldboy   |
|  2   | oldgirl |
|  4   | zuma    |
+------+---------+
5 rows in set (0.00sec) mysql> quit
Bye

2. 在命令行执行备份命令

[root@db01 /]# mysqldump -uroot -poldboy123 -S /data/3306/mysql.sock oldboy>/opt/oldboy_$(date +%F).sql
[root@db01 /]# ll /opt/oldboy_2016-08-28.sql
-rw-r--r-- 1 rootroot 2700 Aug 28 23:25 /opt/oldboy_2016-08-28.sql

3. 备份完检查备份完的数据

[root@db01 /]# egrep -v '#|\*|--|^$'/opt/oldboy_2016-08-28.sql  
DROP TABLE IF EXISTS`student`;
CREATE TABLE `student`(
  `id` int(4) NOT NULL AUTO_INCREMENT,
---------------------------------
INSERT INTO `test`VALUES (3,'hehe'),(5,'kaka'),(1,'oldboy'),(2,'oldgirl'),(4,'zuma');
UNLOCK TABLES;

提示:根据以上得出的结果,我们看看到已备份的表结构语句及插入的数据整合的sql语句。

(2)范例2:如果出现乱码指定字符集参数解决备份乱码问题


假如备份数据库备份文件出现乱码情况,用以下参数解决中文乱码,过程如下

1. 查看备份的数据库客户端及服务端的字符集设置

[root@db01 opt]#mysql -uroot -poldboy123 -S /data/3306/mysql.sock -e "show variableslike '%character%'"
+--------------------------+--------------------------------------------+
| Variable_name            |Value                                       |
+--------------------------+--------------------------------------------+
| character_set_client     | utf8                                       |
|character_set_connection  | utf8                                       |
|character_set_database    | utf8                                       |
| character_set_filesystem | binary                                     |
|character_set_results     | utf8                                       |
|character_set_server      | utf8                                       |
|character_set_system      | utf8                                       |
|character_sets_dir        | /application/mysql-5.5.49/share/charsets/  |
+--------------------------+--------------------------------------------+

2. 指定对应的字符集备份,这里为--default-character_set=utf8 (指定字符集参数)

mysqldump -uroot -poldboy123 -S /data/3306/mysql.sock - oldboy>/opt/oldboy_$(date +%F).sql

执行结果:

[root@db01 opt]# mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock oldboy >/opt/oldboy_$(date +%F).sql  
[root@db01 opt]# egrep -v '#|\*|--|^$' /opt/oldboy_2016-08-28.sql

提示:如果出现乱码情况,使用指定支付及查看,就不会在乱码了,其实,即使导出的中文乱码也没关系,导入数据库依然是正常的。

(3)范例2::利用上述备份好的文件进行数据恢复测试

[root@db01 opt]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock oldboy < /opt/oldboy_2016-08-28.sql
[root@db01 opt]#mysql-uroot -poldboy123 -S /data/3306/mysql.sock -e "select * fromoldboy.test;"
+--------+-----------+
| id     | name      |
+--------+-----------+
|  3     | hehe      |
|  5     | kaka      |
|  1     | oldboy    |
|  2     | oldgirl   |
|  4     | zuma      |                 
+--------+-----------+

(4)范例4:备份时加-B参数以及使用备份文件恢复数据的两种方法


1. 查看不加-B参数备份文件和加-B备份文件区别


不加-B参数备份命令:

mysqldump -uroot -poldboy123 -S /data/3306/mysql.sock oldboy>/opt/oldboy_$(date +%F).sql

加-B参数备份命令:

mysqldump -uroot -poldboy123 -S /data/3306/mysql.sock  oldboy >/opt/oldboy_B_$(date +%F).sql

使用vimdiff命令比较不加-B参数配置文件和加-B参数配置文件区别

[root@db01 /]# cd /opt/
[root@db01 opt]# vimdiff oldboy_2016-08-28.sql oldboy_B_2016-08-28.sql
-- Current Database: `oldboy`                   
--                                                                                
--

# 结论:

直观看,加上-B参数的作用是增加创建数据库核连接数据库的语句了,我们使用-B的备份文件就可以直接恢复,而不适用-B的备份文件还需要先创建库才可以,区别即如下两条语句:

CREATE DATABASE /*!32312 IF NOT EXISTS*/ `oldboy`
USE `oldboy`;

第一种恢复数据(不加-B参数的备份数据护肤数据)

[root@db01 opt]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock 
mysql> show databases;  
+---------------------+
| Database            |
+---------------------+
| information_schema  |
| mysql               |
| oldboy              |
| performance_schema  |
+---------------------+
6 rows in set (0.00sec) mysql> drop database oldboy; 
Query OK, 2 rowsaffected (0.11 sec)
 
mysql> show databases; 
+----------------------+
| Database             |
+----------------------+
| information_schema   |
| mysql                |
| performance_schema   |
+----------------------+
5 rows in set (0.00sec) mysql> quit 
Bye [root@db01 opt]# 
                                   
[root@db01 opt]#

说明:现在使用没有带-B参数备份的备份文件来恢复数据库,在上面已经跟加-B参数的备份文件做了对比,-B参数备份文件中比不带-B参数备份的文件多了创建oldboy数据库核进入oldbou数据库,就是说-B参数的备份文件为我们节省了创建库和进入库的两个步骤,直接将备份文件导入数据库即可,还不用指定那个库,因为里面指定了使oldboy数据库。


第二种备份文件恢复数据(使用加-B参数备份文件恢复)

[root@db01 opt]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock -e "dropdatabase oldboy;"
                                  
[root@db01 opt]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock -e "showdatabases;"     
+---------------------+           
| Database            |
+---------------------+
| information_schema  |
| mysql               |                  
| performance_schema  |
+---------------------+
[root@db01 opt]#  
                                 
[root@db01 opt]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock -e "showdatabases;"         
+---------------------+         
| Database            |
+---------------------+
| information_schema  |
| mysql               |
|               |         
| performance_schema  |
+---------------------+

# 说明:在上面已经将加-B参数备份的配置文件和不加-B参数备份的配置文件进行对比和说明,加上-B参数在恢复数据时会自动建库并恢复数据,不加-B则还得先手动建库,所以这是加-B参数的好处,如果说详见一个数据库的数据拷贝到另一个库里可以不加-B参数,到时候直接将备份文件导入到该库即可。

提示:-B不仅只有自动建库use库的一键恢复库数据的应用,还可以指定多个库

(5)范例5:优化备份文件大小减少输出注释(debug调试)


利用mysqldump的—compact参数优化下备份结果:

[root@db01 opt]# mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock -B oldboy 
    -----------------------

带--compact参数备份

mysqldump-uroot -poldboy123 -S /data/3306/mysql.sock -B oldboy --compact >/opt/oldboy_$(date +%F).sql
                    
egrep -v '#|\*|--|^$' /opt/oldboy_2016-08-28.sql

--compact参数说明:

注意:--compact此参数不在生产环境使用,用于调试即可。

(6)范例6:指定压缩命令压缩备份的MySQL数据

在将数据库数据备份时通过gzip命令压缩,以节省磁盘空间

 mysqldump -uroot -poldboy123 -S /data/3306/mysql.sock -B oldboy|>/opt/oldboy_$(date +%F).sql.
[root@db01 opt]# ll /opt/
total 24
-rw-r--r--  1root root 2700 Aug28 23:25 oldboy_2016-08-28.sql
-rw-r--r--  1root root  897 Aug 29 01:55 oldboy_2016-08-29.sql.gz
-rw-r--r--  1root root 2843 Aug28 23:54 oldboy_B_2016-08-28.sql

以上例子小结:

1. 备份数据使用-B参数,会在备份数据中增加建库及use库的语句。

2. 备份数据使用-B参数,使得后面可以直接接多个库名。

3. 备份数据使用gzip对备份的数据压缩,可以节省磁盘空间。

4. debug时可以用—compact减少输出,但不用于生产。

5. 指定字符集备份用–default-character-set=字符集(一般不适用)

2.1 mysqldump的工作原理

利用mysqldump命令备份数据的过程,实际上就是把数据从mysql库里以逻辑的sql语句的形式直接输出或者生成备份的文件的过程。

可否举一反三,利用这个备份文件恢复的时候的原理?

备份的数据过滤掉注释,都是SQL语句,结果如下:

[root@db01 opt]# egrep -v '#|\*|--|^$'/opt/oldboy_2016-08-28.sql
DROP TABLE IF EXISTS `student`;
CREATE TABLE `student` (
  `id` int(4)NOT NULL AUTO_INCREMENT,
  `name`char(20) NOT NULL,
  `age` tinyint(2)NOT NULL DEFAULT '0',
  `dept`varchar(16) DEFAULT NULL,
  PRIMARY KEY(`id`),
  KEY`index_name` (`name`),
  KEY`index_name_dept` (`name`,`dept`),
  KEY`index_123` (`name`,`dept`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
LOCK TABLES `student` WRITE;
UNLOCK TABLES;
DROP TABLE IF EXISTS `test`;
CREATE TABLE `test` (
  `id` int(4)NOT NULL AUTO_INCREMENT,
  `name`char(20) NOT NULL,
  PRIMARY KEY(`id`),
  KEY`index_name` (`name`)
) ENGINE=InnoDB AUTO_INCREMENT=6 DEFAULTCHARSET=utf8;
LOCK TABLES `test` WRITE;
INSERT INTO `test` VALUES(3,'hehe'),(5,'kaka'),(1,'oldboy'),(2,'oldgirl'),(4,'zuma');
UNLOCK TABLES;

.3. 数据库备份实践

3.1 备份多个库

1. 查看当前有几个库

[root@db01 ~]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock 
mysql> show databases; 
+----------------------+
| Database             |
+----------------------+
| information_schema   |
| 3ooo                 |
| mysql                |
| oldboy               |                #<== 备份
| oldboy_gbk           |                #<== 备份
| performance_schema   | 
+----------------------+
6 rows in set (0.00 sec)

2 开始使用-B参数备份多个库

 mysqldump-uroot -poldboy123 -S /data/3306/mysql.sock  oldboy_gbkoldboy >/opt/bak_$(date +%F).sql.gz
             
 egrep -v '#|\*|--|^$'/opt/bak_2016-08-29.sql.gz

-B参数说明:该参数用于导出若干个数据库,在备份结果中会加入CREATE DATABASE `db_name`和USE db `db_name`两个mysql数据库命令,-B后的参数都将被作为数据库名,该参数比较常用,当-B后的数据库列全时,用-A参数,-A参数意思是转储所有数据中的所有表。

3.2 分库备份

分库备份实际上就是执行一个备份语句备份一个库,如果数据库里面有多个表,就执行多条相同的备份单个库的备份语句就可以备份多个库了,注意每个库都可以对应备份的库作为库名,结尾加sql,

分库意义: 举例,有时一个企业数据库里会有多个库,例如(www,bbs,blog),但是出问题时候的很可能是某一个库,如果在备份时把所有的库都备份成一个数据文件的话,恢复某一个库的数据时就比较麻烦了。

方法1:使用一条一条的命令备份:

mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock -B oldboy>/opt/………
mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock -B oldboy_gbk >/opt/........

方法二:利用命令拼接实现分库备份

[root@db01 ~]# mkdir /server/backup        
[root@db01 ~]#        
[root@db01 ~]# ls /server/backup/                   
3ooo_2016-08-29.sql.gz  oldboy_2016-08-29.sql.gz  oldboy_gbk_2016-08-29.sql.gz

3.3 备份单表及分表备份

  • 单标备份命令语法:mysqldump-u用户名 -p密码 数据库名 表名> 备份的文件名

(1)备份单个表:以下备份oldboy数据库的test表为例


1. 备份前查看oldboy数据库有那些表

[root@db01 ~]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock -e "show tables from oldboy;"        
+-----------------+
| Tables_in_oldboy|
+-----------------+
| student         |
| test            |
+-----------------+

2. 开始备份单个表(test)表

[root@db01 ~]#  
                     
[root@db01 ~]# egrep -v '#|\*|--|^$'/opt/tables.sql          
DROP TABLE IF EXISTS `student`;
CREATE TABLE `student` (
  `id` int(4)NOT NULL AUTO_INCREMENT,
  `name`char(20) NOT NULL,
  `age`tinyint(2) NOT NULL DEFAULT '0',
  `dept`varchar(16) DEFAULT NULL,
  PRIMARY KEY(`id`),
  KEY`index_name` (`name`),
  KEY`index_name_dept` (`name`,`dept`),
  KEY`index_123` (`name`,`dept`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
LOCK TABLES `student` WRITE;
UNLOCK TABLES;

(2)一条命令分表备份:


数据库分表备份其实就是一条一条的备份,但是又时候一条命令一条命令麻烦,可以使用一条命令将多个数据库表备份,这样更简洁,以下将student和test表备份使用一条命令,具体命令如下:

[root@db01 ~]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock -e "show tables from oldboy;"                             #<== 备份前查看当前oldboy数据库中有哪些表
+------------------+
| Tables_in_oldboy |
+------------------+
| student          |
| test             |
+------------------+ -
[root@db01 ~]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock -e "show tables from oldboy;"|egrep -v"Tables_in_oldboy"|sed -r 's#(.*)#mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock oldboy \1 >/opt/\1_tables.sql #g'          
mysqldump -uroot -poldboy123 -S /data/3306/mysql.sock oldboystudent >/opt/student_tables.sql
mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock oldboy test >/opt/test_tables.sql
 
[root@db01 ~]#   
 
[root@db01 ~]# ll -rt /opt/|tail -2                      
-rw-r--r--  1root root 2010 Aug 29 12:18 student_tables.sql
-rw-r--r--  1root root 1941 Aug 29 12:18 test_tables.sql

分表备份的缺点

1.被一个完整全被,在做一个分库分表备份。

2. 脚本批量恢复SQL文件

面试题:多个库或者多个表备份到一块,如何恢复单个库或者表?

解答:

a. 第三方测试库,导入到库里,然后把需要的备份出来,最后恢复到正式库里。

b. 单表:grep 表名 bak.sql> 表名.sql

单库:循环过滤库里所有表,grep表名 bak.ssql > 表名.sql(多个表数据)

c. 实现分库分表备份。

3.4 备份多个表

以下备份oldboy数据库的多个表

1.查看oldboy数据库中的表,命令如下:

mysql -uroot -poldboy123 -S /data/3306/mysql.sock -e "showtables from oldboy;"

2. 备份oldboy数据库中的student、test两个表,命令如下

mysqldump -uroot -poldboy123 -S /data/3306/mysql.sock  >/opt/tables.sql

说明:备份多个表时在oldboy数据库后面指定多个表即可,不需要加-B参数!

3.5 备份数据库表结构(不包含数据)

  • 命令语法:mysqldump -u用户 -p密码数据库名 表名 -d > 备份文件名

利用mysqldump –d参数值备份数据库里面的表结构,

(1)备份oldboy库的所有表的结构:

  1. 备份前输出且过检查

[root@db01 3306]# mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock oldboytest -d –compact     ,
/*!40101 SET @saved_cs_client     = @@character_set_client */;
/*!40101 SET character_set_client = utf8 */;
CREATE TABLE `test` (
  `id` int(4)NOT NULL AUTO_INCREMENT,
  `name`char(20) NOT NULL,
  PRIMARY KEY(`id`),
  KEY`index_name` (`name`)
) ENGINE=InnoDB AUTO_INCREMENT=6 DEFAULTCHARSET=utf8;
/*!40101 SET character_set_client =@saved_cs_client */;

2.. 以上输出正确后将其输出到备份文件中进行备份(备份全部表结果),命令如下

mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock oldboy -d>/opt/bak_oldboy.sql

3.6 备份表中数据

  • 命令语法:mysqldump-u用户 -p密码数据库名 表名 -t > 备份文件名

1. 备份oldboy库中test表前输出查看数据是否想要的

[root@db01 3306]# mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock oldboy test -t --compact
INSERT INTO `test` VALUES(3,'hehe'),(5,'kaka'),(1,'oldboy'),(2,'oldgirl'),(4,'zuma');

2. 以上结果正确开始备份

mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock oldboy test  >/opt/bak_test.sql

使用--tab参数备份的表结构和数据分离

[root@db01 3306]# mysqldump-uroot -poldboy123 -S /data/3306/mysql.sock oldboy test --compact 
[root@db01 3306]# ls /tmp/
a.txt b.txt

说明:通过以上的分离后,数据表和sql语句就分开备份了,一个是文本一个是sql语句

3.7 小结

  • -B备份多个库(并添加create和use库的语句)。

  • -d值备份库表结构。

  • -t只备份数据(sql语句形式)。

  • -T分离库表和数据成不同的文件,数据是文本,非SQL语句。

3.8 刷新binlog的参数

binlog是什么?是记录数据库更新的SQL语句。二进制文件

mysqldump用于定时对某一时刻的数据的全备,例如:00点进行bak.sql.gz

增量备份,当有数据写入到数据库时,还会同时更新的·SQL语句写入到对应的文件里。这个文件就叫做binlog文件。

例如10点丢失数据需要恢复数据

1. 00点时刻备份的bak.sql.gz数据还原到数据库,这个时候数据恢复到了00点。

2. 00点到10::00数据,就要从binlog里恢复

binglog文件生效需要一个参数:log-bin


个人理解:我们平时对数据库进行备份时定时备份,而不是实时备份数据,假设我们数据库北田在晚上00点备份,而我早上8点数据库出现故障导致数据丢失时,我们怎么去找回00点到8点这之间的数据呢?那就要通过binlog文件啦,而binlog文件会切割的,但是在瓦上备份00点前我们是不需要的,所以在备份时要进行刷险binlog文件,重新生成,就是说重新生成的binlog是00-8:00之间的我们需要,需要靠这之间的binlog去恢复数据,

备份刷新binlog是binlog重新生成需要使用-F参数,生成新的binlog文件

下面测试:

[root@db01 3306]#ll /data/3306/          
-rw-rw---- 1 mysqlmysql 2547 Aug 28 15:11 mysql-bin.000001
-rw-rw---- 1 mysqlmysql 6282 Aug 29 01:15 mysql-bin.000002
 
[root@db01 3306]#mysqldump -uroot -poldboy123 -S /data/3306/mysql.sock oldboy test >/opt/bak_test.sql  
                                         
 
[root@db01 3306]#ll /data/3306/          
-rw-rw---- 1 mysqlmysql 2547 Aug 28 15:11 mysql-bin.000001
-rw-rw---- 1 mysqlmysql 6282 Aug 29 01:15 mysql-bin.000002
-rw-rw---- 1 mysqlmysql  150 Aug 29 15:47 mysql-bin.000003

binlog日志切割,确定全备和增量备份的临界点。

-F刷新binlog日志,生成新文件,将来增量恢复从这个文件开始,

--master-data参数说明:

--master-data在备份文件里面会添加CHANGEMASTER语句及binlog文件及位置点信息。


1. 使用-master-data参数备份范例,值为1:为可执行的CHANGEMASTER语句

 mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock oldboy test >/opt/bak_test.sql 
                               #<== 使用--master-data=1参数进行备份
[root@db01 3306]# cat /opt/bak_test.sql         #<== 看下使用该参数真假的说明内容
CHANGE MASTER TO MASTER_LOG_FILE='',MASTER_LOG_POS=

# 以上是使用--master-data=1参数增加的内容,实惠执行的,此内容会显示出binlog文件从那个开始切割,而且还有从文件里面的第几行开始

2. 使用-master-data参数备份范例,值为2:注释的--CHANGEMASTER语句。

[root@db01 3306]# mysqldump -uroot -poldboy123 -S /data/3306/mysql.sockoldboy test -F --master-data=2 >/opt/bak_test.sql     
[root@db01 3306]# cat /opt/bak_test.sql     
CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.000009',MASTER_LOG_POS=107;

# 以上结果表明值为1和2是不一样的,值为1的是可执行的,值为2的则是注释的

说明:一般-master-data=1时用于做从库,想inotify和backup差不多,如果是单纯的增量恢复只需要-master-data=2即可。

--master-data除啦增量恢复确定临界点外,做主从复制是作用更大

3.9 mysqldump的关键参数说明

参数

解释说明

–B

指定多个库,增加建库语句和use语句,  *****

--compact

去掉注释,适合调试输出,生产不适用

-A

备份所有库

-F

刷新binlog日志,生成新文件,将来增量恢复从这个文件开始

--master-data

增加binlog日志文件名及对应的位置点(及CHANGE MASTER语句)。

--master-data=1不注释;--master-data=2注释;

--evebts

备份所有,如果想备份数据库中mysql库就要求使用此参数

-R

备份存储过程

-d

只备份库表结构,无数据。

-t

只备份数据,无库表结构,SQL语句形式。

-T  --tab=name

库表和数据分离不同文件,数据是文本形式。

-x

锁表,在某一时刻不能往里面更新数据,所以备份要小心。

-l –lock-tables

只读锁表

--single-transaction

适合innodb食物数据库备份

innodb表在备份时,通常启用选项—single-transaction来保证备份的一致性,实际上他的工作原理是设定本次会话的隔离级别为:REPEATABLE READ,以确保本次会话(dump)时,不会看到其他会话已经提交了的数据。

-q  --quick

不做缓存查询查询,直接导到标准输出,加快备份速度

更多参数:mysqdump –help

4. 生产场景不同引擎mysqldump备份命令

myisam引擎企业生产备份命令(适合所有引擎或混合殷勤)

mysqldump -uroot -poldboy123 -A -B -F -R--master-data=2 -x --events|gzip >/opt/alL__$(date +%F).sql.sql.gz

# -F也可以不用,与—master-data有些重复

innodb引擎企业生产备份命令(推荐使用的)

mysqldump -uroot -poldboy123 -A -B -F -R--master-data=2 -x --events - |gzip>/opt/all.sql.gz

# -F也可以不用,与—master-data有些重复

额外补充:

(1)mysqldump是逻辑备份说明

缺点:效率不是很高。

优点:简单,方便。可靠,迁移。

适合于数量不是很特别大的场景,打包前50G以内数据。


(2)如果超过50G可选方案如下:

1. xtrabackup物理备份工具,全备和增量。

2. 物理备份方案,从库停止SQL线程,打包,cp。


3)什么时候会使用备份的数据?

1. 恢复数据到测试库的时候。

2. 人为通过SQL语句将数据删除的时候。

3. 做主从复制的时候。

5. 恢复数据库实践

5.1 数据库恢复事项

提示:

1. 数据恢复和字符集关联很大,如果字符集不正确户导致恢复的数据乱码,

2.  mysql命令以及source命令恢复数据库的原理就是把文件的SQL语句,在数据库里重新执行的过程。

5.2 利用source命令恢复数据库

进入mysql数据库控制台,mysql –uroot –p登陆后

mysql> use 数据库

然后使用source命令,后面参数为脚本文件(如这里用到的sql)。

mysql> source oldboy_db.sql  #这个文件是系统路径,默认是登录mysql前的系统路径。


source实践操作如下:

[root@db01 3306]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock 
mysql> show databases;          
+----------------------+
| Database             |
+----------------------+
| information_schema   |
| mysql                |
| oldboy               |
| performance_schema   |
+----------------------+
4 rows in set (0.00 sec)
 
mysql> drop database oldboy;  
Query OK, 2 rows affected (0.00 sec mysql> show databases;  
+----------------------+
| Database             |
+----------------------+
| information_schema   |
| mysql                |
| performance_schema   |
+----------------------+
3 rows in set (0.00 sec)
 
mysql>       
Query OK, 0 rows affected (0.00 sec)
------以下内容输出省略--------- mysql> show databases;                         
+----------------------+
| Database             |
+----------------------+
| information_schema   |
| mysql                |
| oldboy               |
| performance_schema   |
+----------------------+
4 rows in set (0.00 sec)

5.3 利用mysql命令恢复(标准)

  • 命令语法:

mysql -u用户 -p密码 -S /data/3306/mysql.sock 数据库<备份文件

提示:此命令分为两种方式恢复。取决于备份文件备份时是否指定-B参数进行备份

第一种恢复数据(不加-B参数的备份数据护肤数据)

[root@db01 opt]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock 
mysql> show databases;  
+----------------------+
| Database             |
+----------------------+
| information_schema   |
| mysql                |
| oldboy               |
| performance_schema   |
+----------------------+
6 rows in set (0.00sec) mysql> drop database oldboy;        
Query OK, 2 rowsaffected (0.11 sec)
 
mysql> show databases;              
+---------------------+
| Database            |
+---------------------+
| information_schema  |
| mysql               |
| performance_schema  |
+---------------------+
5 rows in set (0.00sec) [root@db01 opt]# 
              #<== 先创建oldboy数据库
[root@db01 opt]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock oldboy</opt/oldboy_2016-08-28.sql

第二种备份文件恢复数据(使用加-B参数备份文件恢复)

[root@db01 opt]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock -e "dropdatabase oldboy;"
                                           
[root@db01 opt]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock -e "showdatabases;"     
+---------------------+                    
| Database            |
+---------------------+
| information_schema  |
| mysql               |                  
| performance_schema  |
+---------------------+
[root@db01 opt]# 
                     
[root@db01 opt]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock -e "showdatabases;"         
+---------------------+          | Database            |
+---------------------+
| information_schema  |
| mysql               |
           |
| performance_schema  |
+---------------------+

# 说明:在上面已经将加-B参数备份的配置文件和不加-B参数备份的配置文件进行对比和说明,加上-B参数在恢复数据时会自动建库并恢复数据,不加-B则还得先手动建库,所以这是加-B参数的好处,如果说详见一个数据库的数据拷贝到另一个库里可以不加-B参数,到时候直接将备份文件导入到该库即可。

如果在导出时指定-B参数,恢复时无需指定库恢复,为什么?

因为使用-B参数导出数据时自带了useoldboy和create database oldboy;而恢复时指定类似于use oldboy;

提示:-B不仅只有自动建库use库的一键恢复库数据的应用,还可以指定多个库

5.4 针对压缩的备份文件恢复数据

方法1:

cd /opt/
gzip bak_2016-08-29.sql.gz           
mysql -uroot -poldboy123 -S /data/3306/mysql.sock</opt/bak_2016-08-29.sql

方法2:

6. 实现和mysql非交互式对话

6.1 利用mysql –e 参数查看mysql数据库

使用-e参数在命令行查看有哪些数据库

[root@db01 /]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock -e "showdatabases;"
+----------------------+
| Database             |
+----------------------+
| information_schema   |
| 3ooo                 |
| mysql                |
| oldboy               |
| oldboy_gbk           |
| performance_schema   |
+----------------------+

使用-e参数在命令行执行多条mysql数据命令

[root@db01 /]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock -e "use oldboy; select * from oldboy.test;"        
+----+----------+
| id   name     |
+----+----------+
|  3 | hehe     |
|  5 | kaka     |
|  1 | oldboy   |
|  2 | oldgirl  |
|  4 | zuma     |
+----+----------+

利用mysql –e参数查看SQL线程执行状态

[root@db01 /]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock -e "show processlist;"   
+-----+-----+----------+------+---------+--------+--------+------------------+
| Id  | User|Host      | db   | Command |Time    | State  | Info             |
+-----+-----+----------+------+---------+--------+--------+------------------+
| 30  | root|localhost | NULL | Query   |   0    | NULL   | showprocesslist  |
+-----+-----+----------+------+---------+--------+--------+------------------+

查看完整的线程状态,此参数才查看满语句是非常有用

[root@db01 /]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock -e "show full processlist;"
+-----+-----+----------+------+----------+--------+--------+------------------------+
| Id  | User|Host      | db   | Command  |Time    | State  | Info                   |
+-----+-----+----------+------+----------+--------+--------+------------------------+
| 30  | root|localhost | NULL | Query    |   0    | NULL   | showfull processlist   |
+-----+-----+----------+------+----------+--------+--------+------------------------+

企业案例:mysql sleep 线程过多的问题案例

mysql> show full processlist;
+-----+-----+----------+------+----------+--------+--------+------------------------+
| Id  | User|Host      | db   | Command  |Time    | State  | Info                   |
+-----+-----+----------+------+----------+--------+--------+------------------------+
| 30  | root|localhost | NULL | Query    |   0    | NULL   | showfull processlist   |
+-----+-----+----------+------+----------+--------+--------+------------------------+
1 row in set (0.00 sec)

1. 解决方法:配置文件里修改

[mysqld]

interactive_timeout = 120           #<== 超时时间;此参数设置后wait_timeout自动生效。

wait_timeout = 120                           #<== 超时时间

2. 其他解决方法:

PHP程序中,不使用持久链接,及使用mysql_connect而不是pconnect(JAVA调整连接池)

3. PHP程序执行完毕,应该显示调用mysql_close。

4. 逐步分析MySQL的SQL查询及慢查询日志,找到查询国漫的SQL优化之。

6.2 利用mysql -e参数查看mysql变量及性能状态

使用命令show variables可以查看相关参数是否在数据库中生效

# 查看mysql数据库中所有的变量

[root@db01 /]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock -e "show variables;"
| Variable_name(变量名称)          | Value (值的意思)                   |
+------------------------------------+--------------------------------------+
|auto_increment_increment            |       1                              |
| auto_increment_offset              |       1                              |
| autocommit                         |       ON                             |
| automatic_sp_privileges            |       ON                             |
-------------------------以下内容省略-----------------------

现在想查看mysql中的server_id,如下:

[root@db01/]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock -e "show variables ;”
       
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| server_id     | 1     |
+---------------+-------+ 查看下binlog是否开启
[root@db01 /]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock -e "show variables ';"
       
+---------------------------------+---------+
| Variable_name                   |Value    |
+---------------------------------+---------+
| log_bin                         | ON      |
| log_bin_trust_function_creators | OFF     |
| sql_log_bin                     | ON      |
+---------------------------------+---------+

6.3 不重启数据库修改数据库参数

不重启数据库修改数据库参数,但是要求重启后还能生效。

[root@db01 /]#mysql -uroot -poldboy123 -S /data/3306/mysql.sock
mysql> showvariables like '%key_buffer%';           
+-------------------+----------+
| Variable_name     | Value    |
+-------------------+----------+
| key_buffer_size   |16777216  |                    
+-------------------+----------+
1 row in set (0.00 sec) mysql>    
Query OK, 0 rows affected (0.07 sec)
 
mysql> show variables like '%key_buffer%';              
+------------------+----------+
| Variable_name    | Value    |
+------------------+----------+
| key_buffer_size  |33554432  |                      
+------------------+----------+
1 row in set (0.00 sec)

不重启数据库更改数据库参数小结:

1. set global key_buffer_size = 1024*1024*32;   #<== 临时生效,重启失效

2. 配置文件也要改,编辑/etc/my.cnf,修改key_buffer_size = 32k

6.4 生产场景常用重要命令小结

show processlist;         #<== 查看数据库里正在执行的SQL语句,可能无法查看完整的SQL语句

show full processlist;      #<== 查看正在执行的完整SQL语句,完整显示(组好使用-e外面看)

set global key_buffer_size = 1024*1024*32;  #<== 不重启数据库调整数据库参数,直接生效,重启后失效

show variables;                    #<== 查看数据库的配置参数信息,例如:my.cnf里参数的生效情况

例如:show variables like '%log_bin';

kill ID;                   #<== 杀掉SQL线程的命令,ID为线程号

show session status;          #<== 查看当前会话的数据库状态信息

show global status;         #<== 查看整个数据库运行状态信息,很重要,要分析并做好监控

show engine innodb status;       #<== 显示innodb引擎的性能状态(早期版本show innodb status)

计算一天之内,MySQL数据库有多个insert,delete,有没有好方法?

1.定时每天0点,show global status 按天取出对比。

2.按天分析binlog日志,获取数据库不同语句的频率。

mysql常用命令参数:

-u:用户

-p:密码

-S:指定socket

-h:主机

-P:端口

-e:命令行执行数据库命令

7. mysqladmin命令

mysqladmin的相关命令

mysqladmin password 123456                 #<== 数据库无密码设置密码

mysqladmin -uroot -p123456 password 123123      #<== 修改密码

mysqladmin -uroot -p123456 status            #<== 查看状态

mysqladmin -uroot -p123456 extended-status      #<== 类似show global status,查看状态信息

mysqladmin -uroot -p123456 -S /data/3306/mysql.sock -i 1 status  #<== 每隔1秒查看一次

mysqladmin -uroot -p123456 flush-logs        #<== 刷新binlog日志

mysqladmin -uroot -p123456 processlist          #<== 查看MySQL数据库进程

mysqladmin -uroot -p123456 processlist -i 1      #<== 实时跟踪进程列表(抓慢查询)

which mysqladmin -uroot -p123456 processlist      #<== 实时查询进程列表

mysqladmin -uroot -p123456 -S /data/3306/mysql.sockstutdown    #<== 关机

mysqladmin -uroot -p123456 -S /data/3306/mysql.sockvariables   #<== 查看变量

本文出自 “土豆” 博客,请务必保留此出处http://zhaoyulin.blog.51cto.co

转载于:https://blog.51cto.com/11913516/1893478

mysql备份及恢复的更多相关文章

  1. mysql备份灵活恢复

    mysql备份灵活恢复 服务上线遇到一个问题,开始操作前做了全库备份,但是没有做要操作的库备份,如果操作过程出现失败情况需要回退时,直接用全备文件做全库恢复很不妥当. 通过mysql的全备份文件,可以 ...

  2. MariaDB/MySQL备份和恢复(一):mysqldump工具用法详述

    本文目录:1.备份分类2.备份内容和备份工具3.mysqldump用法详述 3.1 语法选项 3.1.1 连接选项 3.1.2 筛选选项 3.1.3 DDL选项 3.1.4 字符集选项 3.1.5 复 ...

  3. MariaDB/MySQL备份和恢复(三):xtrabackup用法和原理详述

    本文目录: 1.安装xtrabackup 2.备份锁 3.xtrabackup备份原理说明 3.1 备份过程(backup阶段) 3.2 准备过程(preparing阶段) 3.3 恢复过程(copy ...

  4. MariaDB/MySQL备份和恢复(二):数据导入、导出

    MariaDB/MySQL备份恢复系列: 备份和恢复(一):mysqldump工具用法详述 备份和恢复(二):导入.导出表数据 备份和恢复(三):xtrabackup用法和原理详述 1.导出.导入数据 ...

  5. 【MySQL】MySQL备份和恢复

    一.为什么要备份数据 在生产环境中我们数据库可能会遭遇各种各样的不测从而导致数据丢失, 大概分为以下几种. 硬件故障 软件故障 自然灾害 黑客攻击 误操作 (占比最大) 所以, 为了在数据丢失之后能够 ...

  6. MySQL备份和恢复[1]-概述

    备份类型 完全备份,部分备份 完全备份:整个数据集 部分备份:只备份数据子集,如部分库或表 完全备份.增量备份.差异备份 增量备份:仅备份最近一次完全备份或增量备份(如果存在增量)以来变化的数据,备份 ...

  7. MySQL 备份和恢复 理论知识

    为什么要备份 数据无价   制定备份策略的注意点 1:可容忍丢失多少数据     2:恢复需要在多长时间内完成     3:备份的对象   数据.二进制日志和InnoDB的事务日志.SQL代码(存储过 ...

  8. mysql备份和恢复

    摘自:http://safe.it168.com/a2009/1108/805/000000805490.shtml 要备份数据库" phpbb_db_backup " #mysq ...

  9. mysql 备份和恢复的两条命令

    压缩备份: 1.mysqldump -h localhost -u root -p dbname | gzip > dbname.sql.gz 压缩恢复: 1.gunzip < dbnam ...

  10. MySQL 备份和恢复数据

    备份指定数据库的全部表或指定表 mysqldump -u user -h localhost -p [password] db_name[ tbl_name[,tbl_name.......]]> ...

随机推荐

  1. Light of future-冲刺Day 7

    目录 1.SCRUM部分: 每个成员进度 SCRUM 会议的照片 签入记录 代码运行截图 用户浏览界面 订单详情界面 管理员浏览界面 新增后台界面 2.PM 报告: 时间表 燃尽图 任务总量变化曲线 ...

  2. Adb adb push (remote write failed: No space left on device)

    修改完成程序后, mm 后, 准备要push 进到公司测试手机里面的.之前还真的没有遇到过这个问题,查了一下, 应该是手机没空间了的 sudo adb root sudo adb remount su ...

  3. php.ini配置文件详解(基于5.2.17版本)

    [PHP] ;;;;;;;;;;;;;;;;;;;; About php.ini ;;;;;;;;;;;;;;;;;;;; ;;;;;;;;;;;;;;;;;;;; 关于php.ini文件 ;;;;; ...

  4. GO代码风格指南 Uber Go (转载)

    原文地址:https://github.com/uber-go/guide/blob/master/style.md 译文出处:https://github.com/uber-go/guide 本文永 ...

  5. mysql命令行参数 --- 这些参数不同于 mysqldump 后的 那些参数(下边文章开头有链接) :2种类型的参数 含义是不一样的

    mysql命令行参数  --- 这些参数不同于  mysqldump  后的 那些参数   :2种类型的参数 含义是不一样的 一,mysql命令行参数 Usage: mysql [OPTIONS] [ ...

  6. 类 文件 右下角呈现 红色小圆圈,里面有一个J 标记

    intellj(idea) 项目中类 文件 右下角呈现 红色小圆圈,里面有一个J 标记,表明此为 未设置为源文件,没有编译,本来应该是属于源文件的,结果现在没有被标记为源文件,也就没法编译了.

  7. qad progress数据库启动出错解决

    1. 启动时报:SYSTEM ERROR: Wrong dbkey in block. Found 0, should be 6342528 in area 36.  (439) ** Save fi ...

  8. 关于 System.IO.File.Exists 需要注意的事项

    各位:   .NET Framework 本省在设计的时候,他对于异常没有完全做到抛出,这样可能会有很多意想不到的问题.   比如 你在asp.net 应用程序中判断文件是否存在,这个文件可能是一个共 ...

  9. 用一个完整的案例讲解Python数据分析的整个流程和基础知识

    先来想一下数据分析的流程,第一步获取数据,因此本节内容就是获取数据以及对数据的基本操作. 1.数据导入 1.1 导入.xlsx文件 要导入一个.xlsx后缀的Excel文件,可以使用pd.read_e ...

  10. MDC是什么鬼?用法、源码一锅端

    近期用到阿里的一款开源的数据同步工具 Canal,不经意之中看到了 MDC 的用法,而且平时项目中也多次用到 MDC,趁机科普一把. 通过今天的分享,能让你轻松 get 如下几点,绝对收获满满. a) ...