关于mysql binlog二进制
binlog
在mysql中,当发生数据变更时,都会将变更数据的语句,通过二进制形式,存储到binlog日志文件中.
通过binlog文件,你可以查看mysql一段时间内,对数据库的所有改动.
也可以通过binlog文件,进行数据恢复,以及集群同步.
binlog常用配置参数
1
2
3
4
5
6
7
8
9
10
|
[binlog] log_bin = mysql-bin # {on | off | base_name}指定是否启用记录二进制日志或者指定一个日志路径 sql_log_bin = on # { on | off } 指定是否启用记录二进制日志 expire_logs_days=7 # 指定自动删除二进制日志的时间,即日志过期时间 log_bin_index= /usr/local/mysql/mysql-bin .index # 指定mysql-bin.index文件的路径 binlog_format = mixed # { mixed | row | statement } 指定二进制日志基于什么模式记录 max_binlog_size = 100M # 指定二进制日志文件最大值 binlog_cache_size = 4M # 指定事务日志缓存区大小 max_binlog_cache_size= 64M # 指定二进制日志缓存最大大小 sync_binlog = 0 # { 0 | n } 指定写缓冲多少次,刷一次盘 |
binlog常见命令
数据库sql命令
mysql> show master logs; # 查看日志文件列表
+------------------+-----------+
| Log_name | File_size |
+------------------+-----------+
| mysql-bin.000009 | 143 |
| mysql-bin.000010 | 143 |
| mysql-bin.000011 | 646950 |
| mysql-bin.000012 | 120 |
+------------------+-----------+
4 rows in set (0.01 sec) mysql> show master status; # 查看最后(最新)一个binlog日志的编号名称,及其最后一个操作事件pos结束点(Position)值
+------------------+----------+--------------+------------------+-------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000012 | 120 | | | |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec) mysql> flush logs; #刷新日志文件,产生新编号的日志文件
Query OK, 0 rows affected (0.01 sec) mysql> reset master; # 清空所有binlog日志
Query OK, 0 rows affected (0.00 sec)
mysqlbinlog命令
首先,我们需要通过查看配置项的 log-bin配置和datadir 配置项,获取到binlog文件存储位置,在宝塔中,默认为"/www/server/data/mysql-bin****"文件
通过mysqlbinlog命令,即可查看具体日志信息:
我们先创建一个简单的表,来进行测试
1
|
CREATE TABLE `test`.`test` ( `id` INT NOT NULL AUTO_INCREMENT , ` name ` VARCHAR (32) NOT NULL , `age` INT (10) NOT NULL , `sex` TINYINT(1) NOT NULL , PRIMARY KEY (`id`)) ENGINE = InnoDB; |
创建新的数据
1
|
INSERT INTO `test` (`id`, ` name `, `age`, `sex`) VALUES ( NULL , '仙士可' , '11' , '1' ), ( NULL , '宁成龙' , '33' , '1' ), ( NULL , '宁成龙22' , '1' , '12' ) |
查看binlog文件
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
|
[root@localhost data] # /www/server/mysql/bin/mysqlbinlog mysql-bin.000015 /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/; /*!40019 SET @@session.max_insert_delayed_threads=0*/; /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/; DELIMITER /*!*/; # at 4 #200415 21:39:32 server id 1 end_log_pos 120 CRC32 0x05fef589 Start: binlog v 4, server v 5.6.44-log created 200415 21:39:32 at startup # Warning: this binlog is either in use or was not closed properly. ROLLBACK/*!*/; BINLOG ' lA6XXg8BAAAAdAAAAHgAAAABAAQANS42LjQ0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA AAAAAAAAAAAAAAAAAACUDpdeEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAYn1 /gU = '/*!*/; # at 120 #200417 22:19:10 server id 1 end_log_pos 383 CRC32 0x7f61e7b6 Query thread_id=26 exec_time=0 error_code=0 use ` test `/*!*/; SET TIMESTAMP=1587133150/*!*/; SET @@session.pseudo_thread_id=26/*!*/; SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/; SET @@session.sql_mode=1342177280/*!*/; SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/; /*!\C utf8mb4 * // *!*/; SET @@session.character_set_client=45,@@session.collation_connection=224,@@session.collation_server=45/*!*/; SET @@session.lc_time_names=0/*!*/; SET @@session.collation_database=DEFAULT/*!*/; CREATE TABLE ` test `.` test ` ( ` id ` INT NOT NULL AUTO_INCREMENT , `name` VARCHAR(32) NOT NULL , `age` INT(10) NOT NULL , `sex` TINYINT(1) NOT NULL , PRIMARY KEY (` id `)) ENGINE = InnoDB /*!*/; # at 383 #200417 22:20:26 server id 1 end_log_pos 462 CRC32 0xb0c717e0 Query thread_id=64 exec_time=0 error_code=0 SET TIMESTAMP=1587133226/*!*/; BEGIN /*!*/; # at 462 # at 494 #200417 22:20:26 server id 1 end_log_pos 494 CRC32 0x90b2c86f Intvar SET INSERT_ID=1/*!*/; #200417 22:20:26 server id 1 end_log_pos 718 CRC32 0x1969fb9b Query thread_id=64 exec_time=0 error_code=0 SET TIMESTAMP=1587133226/*!*/; INSERT INTO ` test ` (` id `, `name`, `age`, `sex`) VALUES (NULL, '仙士可' , '11' , '1' ), (NULL, '宁成龙' , '33' , '1' ), (NULL, '宁成龙22' , '1' , '12' ) /*!*/; # at 718 #200417 22:20:26 server id 1 end_log_pos 749 CRC32 0x359c1fc1 Xid = 569 COMMIT/*!*/; DELIMITER ; # End of log file ROLLBACK /* added by mysqlbinlog */; /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/; /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/; [root@localhost data] # |
可以看到,binlog日志中记录了创建数据表,和insert数据的记录.
同时,mysqlbinlog命令还支持日志筛选等参数.
1
2
3
4
5
6
7
8
|
常用参数: --start-datetime=datetime 从二进制日志中第1个日期时间等于或晚于datetime参量的事件开始读取。datetime值相对于运行mysqlbinlog的机器上的本地时区。该值格式应符合DATETIME或TIMESTAMP数据类型。 --stop-datetime=datetime 从二进制日志中第1个日期时间等于或晚于datetime参量的事件起停止读。关于datetime值的描述参见--start-datetime选项。该选项可以帮助及时恢复。 --start-position=N 从二进制日志中第1个位置等于N参量时的事件开始读。 --stop-position=N 从二进制日志中第1个位置等于和大于N参量时的事件起停止读。 --base64-output=DECODE-ROWS 会显示出row模式带来的sql变更 -d 与 --database 效果相同,指定一个数据库名称。 --offset=N,-o N 跳过前N个条目。 |
binlog模式
在上面我们讲到了,mysql发生数据变更后,才会将变更的语句,通过二进制形式存储,而通过存储语句的方式,mysql将其分为了3种方式.
行模式(row level)
binlog日志将会记录数据库中每一条的数据变更,例如当你delete 数据100万条时,会产生100万条记录,用于记录每一行数据的变更情况.
优点:此模式可以非常精确的记录每条记录的变更细节.不需要依赖sql的上下文关系,例如存储过程,触发器.
缺点:此模式会产生大量的日志内容.
语句模式(Statement Level)
mysql默认模式,和行模式不同的事,语句模式会直接记录mysql执行数据变更的语句,例如delete 100万数据,它只会记录该delete语句,如果需要调用binlog时,将会通过记录的这个语句,重新执行一遍delete.
混合模式(mix)
在此模式下,mysql会根据每条执行的语句,区分对待应用存储的模式.
当表结构发生变化时,将使用语句模式存储
当表数据发生update/delete操作时,使用行模式存储
数据库删库后,如何恢复数据
当数据库被删除后,我们可以通过每周/每天备份的数据库文件中,恢复之前的数据.
同时通过binlog,筛选出备份后未恢复的数据,通过mysqlbinlog命令导出sql,执行回去,即可恢复大部分的数据了.
本文为仙士可原创文章,转载无需和我联系,但请注明来自仙士可博客www.php20.cn
关于mysql binlog二进制的更多相关文章
- Mysql binlog二进制日志
Mysql binlog日志有三种格式,分别为Statement,MiXED,以及ROW! 1.Statement:每一条会修改数据的实际原sql语句都会被记录在binlog中. 优点:不需要记录每一 ...
- MySQL备份方案-->(利用mysqldump以及binlog二进制日志)
MySQL备份方案-->(利用mysqldump以及binlog二进制日志) 随着数据不 ...
- 使用python 模仿mybinlog 命令 二进制分析mysql binlog
出处:黑洞中的奇点 的博客 http://www.cnblogs.com/kelvin19840813/ 您的支持是对博主最大的鼓励,感谢您的认真阅读.本文版权归作者所有,欢迎转载,但请保留该声明. ...
- Mysql binlog日志解析
1. 摘要: Mysql日志抽取与解析正如名字所将的那样,分抽取和解析两个部分.这里Mysql日志主要是指binlog日志.二进制日志由配置文件的log-bin选项负责启用,Mysql服务器将在数据根 ...
- MySQL Binlog的介绍
binlog基本定义:二进制日志,也成为二进制日志,记录对数据发生或潜在发生更改的SQL语句,并以二进制的形式保存在磁盘中: 作用:MySQL的作用类似于Oracle的归档日志,可以用来查看数据库的变 ...
- 如何通过Mysql的二进制日志恢复数据库数据
经常有网站管理员因为各种原因和操作,导致网站数据误删,而且又没有做网站备份,结果不知所措,甚至给网站运营和盈利带来负面影响.所以本文我们将和大家一起分享学习下如何通过Mysql的二机制日志(binlo ...
- 【转载】mysql binlog日志自动清理及手动删除
说明:当开启mysql数据库主从时,会产生大量如mysql-bin.00000* log的文件,这会大量耗费您的硬盘空间.mysql-bin.000001mysql-bin.000002mysql-b ...
- 腾讯工程师带你深入解析 MySQL binlog
欢迎大家前往云+社区,获取更多腾讯海量技术实践干货哦~ 本文由 腾讯云数据库内核团队 发布在云+社区 1.概述 binlog是Mysql sever层维护的一种二进制日志,与innodb引擎中的red ...
- 教你MySQL Binlog实用攻略
本文由云+社区发表 1.概述 binlog是Mysql sever层维护的一种二进制日志,与innodb引擎中的redo/undo log是完全不同的日志:其主要是用来记录对mysql数据更新或潜在发 ...
随机推荐
- JavaEE 前后端分离以及优缺点
前端概念 前端是一切直接与用户交互的页面或软件(用户看得见.摸得着)的统称,比如各种网站网页.andorid 手机各种 App.苹果手机各种 app.微信小程序.网络游戏客户端等.所以,普通人使用计算 ...
- 【分布式】-- 基于Nacos、OpenFeign搭建的微服务抽奖系统后台小案例
1.项目介绍 最近入项目之前要求熟悉一下SpringCloud Nacos微服务基于Feign接口调用并整合Swagger2进行接口文档展示给前端,所以自己按照要求来编写并整合了一套基于SpringC ...
- JAVA并发(4)-并发队列ConcurrentLinkedQueue
本文开始介绍并发队列,为后面介绍线程池打下基础.并发队列莫非也是出队.入队操作,还有一个比较重要的点就是如何保证其线程安全性,有些并发队列保证线程安全是通过lock,有些是通过CAS. 我们从Conc ...
- SSM框架的配置整合(包含配置文件代码)
由于SSM框架学习都要去网上或者以前的项目拷贝相同的代码,所以我在此把自己用到的配置文件全放在这里,帮助自己,帮助别人 首先开始前导入依赖和处理静态资源导出问题 <dependencies> ...
- GO学习-(10) Go语言基础之指针
Go语言基础之指针 区别于C/C++中的指针,Go语言中的指针不能进行偏移和运算,是安全指针. 要搞明白Go语言中的指针需要先知道3个概念:指针地址.指针类型和指针取值. Go语言中的指针 任何程序数 ...
- Go语言协程并发---生产者消费者实例
package main import ( "fmt" "strconv" "time" ) /* 改进生产者消费者模型 ·生产者每秒生产一 ...
- 重新整理 .net core 实践篇—————日志系统之服务与日志之间[十六]
前言 前文介绍了一些基本思路,那么这里介绍一下,服务如何与配置文件配合. 正文 服务: public interface ISelfService { void ShowLog(); } public ...
- python_appium 之使用Appium Inspector定位工具进行元素识别,编写验证demo
一.前提条件 appium环境搭建完成,模拟器Genymotion 安装完成,且已经下载成功了模拟设备 二.元素识别操作步骤及demo 1.进入appium如下菜单 2.填写Desired Capab ...
- 【NX二次开发】Block UI 指定位置
属性说明 属性 类型 描述 常规 BlockID String 控件ID Enable Logical 是否可操作 Group ...
- 06:JS(02)
对象 一切皆对象 数组(类似于python里面的列表) [] var l = [11,22,33,44,55] typeof l "object" var l1 = [11,'sd ...