MySQL-07 日志管理
学习目标
- MySQL日志
- 二进制日志
- 错误日志
- 查询通用日志
- 慢查询日志
MySQL日志
MySQL日志分为四类,说明如下:
- 错误日志:记录MySQL服务的启动、运行或者停止时出现的问题。
- 查询日志:记录客户端连接和执行的语句。
- 二进制日志:记录所有更改数据的语句,可以用于数据复制。
- 慢查询日志:记录所有执行时间超过long_query_time的所有查询或者不使用索引的查询。
刷新日志的命令:FLUSH LOGS、MySQLAdmin flush-logs、MySQLAdmin refresh。
启用日志功能会降低MySQL数据库的性能和占用磁盘空间。
二进制日志
二进制日志是一个二进制文件,主要用于记录修改数据或有可能引起数据变更(例如没有匹配删除条件的DELETE语句)的MySQL语句,以事务安全的方式包含更新日志中可用的所有信息。
二进制日志中记录了对MySQL数据库执行更改的所有操作,并且记录了语句发生时间、执行时长、操作数据等其它额外信息,但是它不记录SELECT、SHOW等那些不修改数据的SQL语句。如果记录所有语句,使用查询日志。
二进制日志主要要用于数据库恢复和主从复制,以及审计(audit)操作。
启动和设置二进制日志
在my.ini配置文件的[mysqld]节点添加以下配置信息:
[mysqld]
port = 3306 ; 服务端使用的字符集默认为8比特编码的latin1字符集
character-set-server=utf8
; 创建新表时将使用的默认存储引擎
default-storage-engine=INNODB ; 二进制日志设置开始
; 开启二进制日志
log-bin
; 自动清除10天过期日志。MySQL服务重启或者日志刷新时候将被删除。
expire-logs-days=10
; 单个日志文件大小
max_binlog_size=100M
;二进制日志设置结束
添加完成后,关闭并重启MySQL服务进程,即可打开和查看二进制日志。
确认二进制日志已经打开:
在mysql的data数据目录下,生成以主机名称作为文件名的日志文件:
如果需要修改二进制日志文件的存储位置和名称,则修改my.ini配置文件中log-bin的值:
例如:
log-bin="D:/logs/binlog"
重启mysql服务后,日志将保存在“D:/logs”目录中,并且文件名为“binlog”。
查看二进制日志
MySQL服务每重启一次(或者执行SQL命令FLUSH LOGS),以后缀名为.00000*的文件会增加一个;或者日志文件的的大小超过max_bin_log设置的大小(默认1G),也会重新创建一个新文件。
示例1:在MySQL中查看日志文件个数和文件名:
示例2:查看二进制日志
在命令行中,使用mysqlbinlog命令工具查看。
mysqlbinlog需要添加参数“-v”,否则无法看到SQL语句。
二进制日志格式
- 基于行的格式row
由于ROW格式记录的日志量巨大, 在MySQL 5.6以后, 官方增加了binlog_row_image参数改善其记录方式。
value值:
FULL为默认值,意思是记录一行纪录里面的所有内容,无论该列是否被修改。
MINIMAL仅记录被修改的列,这样就可以大大减少记录量。
NOBLOB与FULL类型,但是如果没有修改BLOB或TEXT类型的列,就不会记录该大数据类型的列。
- 基于段的格式statement
优点:记录每个事件所执行的SQL语句, 故不需要记录每一行的具体变化, 所以日志记录量相对较少, 节约磁盘IO与网络IO(如果只对一条记录修改或者插入,ROW格式的日志量有可能少于STATEMENT格式)。
缺点:为了确保这些SQL语句能在从库中正确地执行, 所以要记录上下文信息, 以保证重放时的行为一致. 但如果使用UUID()这类非确定性函数, 可能会造成主从的数据不一致.
格式设置:
删除二进制日志
示例1:删除全部二进制文件
示例2:删除创建时间比RASK-PC-bin.000005的日志文件
删除前日志文件:
或者:
执行删除部分日志命令:
暂时启动和停止二进制日志功能
启动
停止
使用二进制日志恢复数据库
mysqlbinlog工具可以从指定的时间点开始恢复数据。
mysqlbinlog恢复数据语法格式:
mysqlbinlog [option] filename | mysql -uUser -pPassword
option可选项:
--start-datetime:指定恢复数据库的起始时间点。
--stop-datetime:指定恢复数据库的结束时间点。
--start-position:恢复的开始位置(日志中的位置)。
--stop-position:恢复的结束位置。
示例1:全部恢复
示例2:恢复到2018年6月17日10:30:00时的状态
错误日志
错误日志默认位于data目录下,文件名为:hostname.err。例如:
如果需要修改默认文件存储路径和文件名,需要在my.ini配置文件的[mysqld]节点添加以下信息:
log-error=[path/[filename]]
注意:mysql如果无法创建path,需要手动创建。
查看日志文件
直接使用文本工具查看。
删除日志文件
可以直接删除文本日志文件。MySQL在运行时,删除错误日志文件不会自动创建新的日志文件,需要在服务器端执行:
mysqladmin -u root -pPassword flush-logs [日志类型]
日志类型: binary, engine, error,general, relay, slow
或者在mysql中执行
FLUSH LOGS
MySQL重启会重新创建日志文件。
通用查询日志
通用查询日志记录了MySQL的所有用户操作,包括启动和关闭服务、执行查询和更新语句。
启动和设置通用查询日志
5.7之前的版本
在my.ini配置文件[mysqld]节点下添加:
log[=path/[filename]]
例如:
; 开启通用查询日志
log
5.7版本
; 开启通用查询日志
general-log=1
general_log_file="D:/logs/genlog.log"
如果不指定general_log_file,则查询日志保存在data目录下,文件名:hostname.log。
查看通用查询日志
使用记事本查看
删除和重建通用查询日志
通过my.ini配置文件找到查询日志存储位置,直接在文件管理系统中删除。
重建通用查询日志命令:
mysqladmin -u root -proot -flush logs general
慢查询日志
慢查询日志记录查询时长超过指定时间的日志。通过慢查询日志,可以找出执行时间较长、执行效率较低的语句,然后针对其进行优化。
启动和设置慢查询日志
在my.ini配置文件[mysqld]节点下添加慢查询日志配置:
5.6和之前版本:
; 开启慢查询日志
log-slow-queries
; 设置查询时长阀值为20秒(默认10秒)
long_query_time=20
5.7版本:
slow_query_log=ON
; 设置慢查询日志存储位置
slow_query_log_file='d:/logs/slow.log'
; 设置超时,默认为10秒
long_query_time=20
slow_query_log_file不进行设置,则日志存储在data目录下,默认文件名为hostname-slow.log,例如:
查看慢查询日志
使用文本工具直接查看日志文件即可。
删除慢查询日志
直接使用文件系统删除。删除后无法自动创建,需要执行mysqladmin命令或者登陆到mysql服务器执行刷新日志命令:
# 系统命令
mysqladmin -u User -pPassword flush-logs slow # mysql执行语句
FLUSH LOGS;
日志设置参考代码(mysql5.7.14)
[mysqld]
port = 3306
;指定数据库的编码格式
character-set-server=utf8
;启动事件
;event_scheduler=ON ; 二进制日志设置开始
; 开启二进制日志
log-bin="d:/mysqllogs/binlog"
; 自动清除10天过期日志。MySQL服务重启或者日志刷新时候将被删除。
expire-logs-days=10
; 单个日志文件大小
max_binlog_size=100M
;二进制日志设置结束 ; 错误日志的设置
log-error="d:/mysqllogs/errlog" ; 开启通用查询日志
general-log=1
general_log_file="d:/mysqllogs/genlog" ; 开启慢查询日志
slow_query_log=ON
; 设置慢查询日志存储位置
slow_query_log_file='d:/mysqllogs/slowlog'
; 设置超时,默认为10秒
long_query_time=20
综合练习
练习一:二进制日志综合练习:
- 启动二进制日志,指定二进制日志名称为binlog,日志存储位置为D:/logs
- 验证重启mysql和FLUSH LOGS执行语句对二进制日志的影响
- 使用mysqlbinlog命令查看二进制日志文件
- 使用二进制日志文件恢复数据:创建测试表T1(id,name),向数据表插入两条记录,查看日志文件,找出日志文件记录的SQL语句;删除T1表,使用mysqlbinlog命令恢复T1表
- 删除二进制日志文件。暂停和启动二进制日志文件。
练习二:错误日志综合练习
- 设置和启动错误日志文件,指定错误日志文件名称为errlog,日志存储位置为D:/logs
- 使用记事本查看错误日志文件
- 删除错误日志文件
- 重新创建日志文件
练习三:通用查询日志综合练习
- 设置和启动通用查询日志文件,指定通用查询日志文件名称为general_query_log,日志存储位置为D:/logs
- 查看通用查询日志
- 删除通用查询日志
练习四:慢查询日志综合练习
- 设置和启动慢查询日志文件,指定慢查询日志文件名称为slow_query_log,日志存储位置为D:/logs
- 查看慢查询日志文件
- 删除慢查询日志文件
MySQL-07 日志管理的更多相关文章
- MySQl Study学习之--MySQl二进制日志管理
MySQl Study学习之--MySQl二进制日志管理 MySQL二进制日志(Binary Log) a.它包括的内容及作用例如以下: 包括了全部更新了数据或者已经潜在更新了数据(比方没 ...
- MySQL InnoDB 日志管理机制中的MTR和日志刷盘
1.MTR(mini-transaction) 在MySQL的 InnoDB日志管理机制中,有一个很重要的概念就是MTR.MTR是InnoDB存储擎中一个很重要的用来保证物理写的完整性和持久性的机制. ...
- mysql的日志管理
日志操作是数据库维护中最重要的手段之一,日志文件会记录MySQL服务器的各种信息,所以当MySQL服务器遭到意外损坏时,不仅可以通过日志文件来查看出错的原因,而且还可以通过日志文件进行数据恢复. MY ...
- mysql数据库-日志管理
MySQL 支持丰富的日志类型 事务日志:transaction log 事务日志的写入类型为"追加",因此其操作为"顺序IO":通常也被称为:预写式日志 wr ...
- mysql慢日志管理
一.日志切割 原理: 1.cp一个慢日志备份 2.清空原理的慢日志 3.写成脚本,每天一切,这样就ok啦 二.查找日志中的慢日志 1.做了日志切割(慢日志文件就小了) 2.查找某个时间的慢日志 日志时 ...
- 28.MysQL的日志管理及备份与恢复
MySQL 索引.事务与存储引擎 目录 MySQL 索引.事务与存储引擎 MySQL 索引 索引的概念 索引的作用及副作用 索引的作用 索引的副作用 创建索引的原则依据 索引的分类和创建 普通索引 唯 ...
- MySQL日志管理
MySQL日志管理 2013年09月26日 ⁄ MySQL ⁄ 共 14266字 ⁄ 评论数 ⁄ 被围观 , views+ 一.日志类型: MySQL有几个不同的日志文件,可以帮助你找出mysqld内 ...
- MySQL 日志管理详解
大纲 一.日志分类 二.日志详解 注:MySQL版本,Mysql-5.5.32(不同版本的mysql变量有所不同) 一.日志分类 错误日志 查询日志 慢查询日志 二进制日志 中继日志 事务日志 滚动日 ...
- 项目实战6—Mysql实现企业级日志管理、备份与恢复实战
Mysql实现企业级日志管理.备份与恢复实战 环境背景:随着业务的发展,公司业务和规模不断扩大,网站积累了大量的用户信息和数据,对于一家互联网公司来说,用户和业务数据是根基.一旦公司的数据错乱或者丢失 ...
- mysql 开发进阶篇系列 33 工具篇(mysqlbinlog日志管理工具)
一.概述 由于服务器生成的二进制日志文件以二进制格式保存,所以如果要想检查这些文件的文本格式,就会用到mysqlbinlog日志管理工具. mysqlbinlog的语法如下: mysqlbinlog ...
随机推荐
- vmstat命令的使用
vmstat命令的含义为显示虚拟内存状态(“Viryual Memor Statics”),但是它可以报告关于进程.内存.I/O等系统整体运行状态. 语法 vmstat(选项)(参数) 选项 -a:显 ...
- linux中目录操作<1>
一.目录的权限 (1)目录文件的访问权限分为三组,分别为所有者,用户,其他.每个权限组的权限位有3个,分别为读.写.执行. 注意:可以使用stat函数得到目录文件的状态信息.权限为在stat结构中st ...
- c++中.c_str和.c_data
1 关于.c_str的用法: const char *c_str(); 这个数组的数据是临时的,当有一个改变这些数据的成员函数被调用后,其中的数据就会失效.因此要么现用先转换,要么把它的数据复制到用户 ...
- 用AntDeploy如何更新Agent
AntDeploy AntDeploy是一款开源的一键发布部署工具,目的是代替重复性的发布动作,提高部署效率 1.一键部署iis 2.一键部署windows服务 3.一键部署到Docker 4.支持增 ...
- 实例List化
实现了__iter__()的实例虽能用于for循环,看似像list,但并不能将其当做list来使用,比如,Fib()[5]还是报错 可通过实现__getitem__()方法,:来实现让实例像list那 ...
- 关于Page翻页效果, PageViewConrtoller
Page View Controllers你使用一个page view controller用page by page的方式来展示内容.一个page view controller管理一个self-c ...
- 一个关于国密SM4的故事
一个关于国密SM4的故事 我的名字叫SM4,我还有三位兄长,分别是大哥SM1, 二哥SM2, 和三哥SM3.说起我的名字,故事要回到2006年的时候,我出生的时候并不是叫SM4的,而是叫做SMS4.只 ...
- C# BitmapData使用说明
C# BitmapData使用说明msdn关于BitmapData原文解释地址:http://msdn.microsoft.com/zh-cn/library/5ey6h79d(v=vs.110).a ...
- oracle 表空间及查看所有用户的表空间
用户有默认表空间,但是只能指定一个,但是你有其它表空间的限额的话,可以将表建到其它表空间中. 语法 create table xxx(xxxx xx) tablespace xxxxx 1.查看当前用 ...
- [转]Adaboost 算法的原理与推导
看了很多篇解释关于Adaboost的博文,觉得这篇写得很好,因此转载来自己的博客中,以便学习和查阅. 原文地址:<Adaboost 算法的原理与推导>,主要内容可分为三块,Adaboost ...