MySQL从库生成大量小的relay log案例模拟
最近看到"八怪"写的《MySQL:产生大量小relay log的故障一例》,因之前也遇到类似的情况,一直没搞懂原理及复现,看完此文章后,本着实践是检验真理的唯一标准的原则,决定自己也手动模拟一番,加深印象。
其中的模拟步骤与原文中不一致,感兴趣的小伙伴也可以自己动手模拟。
1. 案例模拟
原理啥的原文已介绍,此处不再赘述,只是直接进行案例模拟。
1.1 修改参数
从库上查看
mysql> select Heartbeat from mysql.slave_master_info;
+-----------+
| Heartbeat |
+-----------+
| 5 |
+-----------+
1 row in set (0.00 sec)
从库上修改
/** 先查看slave_net_timeout参数 */
mysql> show variables like '%slave_net_timeout%';
+-------------------+-------+
| Variable_name | Value |
+-------------------+-------+
| slave_net_timeout | 10 |
+-------------------+-------+
1 row in set (0.00 sec) /** 修改参数slave_net_timeout * /
mysql> set global slave_net_timeout =2;
Query OK, 0 rows affected (0.00 sec)
因设置的值比较小,所以效果很明显。
1.2 主从同步调整
/** 先停止同步 */
mysql> stop slave;
Query OK, 0 rows affected (0.00 sec) /** 调整为延迟60s ,此步骤可以不设置也可以复现,亲测 */
mysql> change master to master_delay=60;
Query OK, 0 rows affected (0.01 sec) /** 开启同步 */
mysql> start slave;
Query OK, 0 rows affected (0.01 sec)
1.3 查看relay log
会发现每秒生产1个很小的relay log
-rw-r----- 1 mysql mysql 200 Oct 22 15:59 relay_34.000001
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000002
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000003
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000004
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000005
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000006
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000007
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000008
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000009
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000010
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000011
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000012
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000013
-rw-r----- 1 mysql mysql 366 Oct 22 15:59 relay_34.000014
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000015
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000016
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000017
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000018
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000019
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000020
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000021
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000022
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000023
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000024
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000025
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000026
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000027
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000028
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000029
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000030
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000031
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000032
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000033
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000034
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000035
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000036
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000037
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000038
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000039
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000040
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000041
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000042
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000043
-rw-r----- 1 mysql mysql 366 Oct 22 16:00 relay_34.000044
-rw-r----- 1 mysql mysql 366 Oct 22 16:01 relay_34.000045
-rw-r----- 1 mysql mysql 366 Oct 22 16:01 relay_34.000046
-rw-r----- 1 mysql mysql 366 Oct 22 16:01 relay_34.000047
-rw-r----- 1 mysql mysql 366 Oct 22 16:01 relay_34.000048
-rw-r----- 1 mysql mysql 366 Oct 22 16:01 relay_34.000049
-rw-r----- 1 mysql mysql 366 Oct 22 16:01 relay_34.000050
-rw-r----- 1 mysql mysql 366 Oct 22 16:01 relay_34.000051
-rw-r----- 1 mysql mysql 366 Oct 22 16:01 relay_34.000052
-rw-r----- 1 mysql mysql 320 Oct 22 16:01 relay_34.000053
-rw-r----- 1 mysql mysql 2.3K Oct 22 16:01 relay_34.index
至此也就模拟出相应的现象。
2. 搬点原理过来
如果满足下面三个条件,将会出现案例中的故障:
- 主从中的MASTER_HEARTBEAT_PERIOD的值大于从库slave_net_timeout
- 主库当前压力很小持续slave_net_timeout设置时间没有产生新的Event
- 之前主从有一定的延迟
只有按照这个标准去模拟就可以复现了。
MySQL从库生成大量小的relay log案例模拟的更多相关文章
- MySQL 主从延迟几万秒 Queueing master event to the relay log(转)
数据库版本Server version: 5.6.24-log Source distribution 问题描述 数据采集平台业务数据库由于批量灌数据导致主从延迟上万秒. 复制线程长期处于Que ...
- QT的MYSQL驱动库编译
QT的MYSQL驱动库编译 需要准备QT的源码Src,此次编译64位 在QTCreator中打开mysql.pro 修改两个pro 文件,下图为改好 1.mysql.pro TARGET = qsql ...
- mysql relay log参数汇总
前言:MySQL进行主主复制或主从复制的时候会在配置文件制定的目录下面产生相应的relay log,本文档总结这些相关参数的定义及解释. 1.什么是relay log The relay log, l ...
- 【转】mysql 拖库写库用法
mysqldump常用于MySQL数据库逻辑备份. 1.各种用法说明 A. 最简单的用法: mysqldump -uroot -pPassword [database name] > [dump ...
- Linux下动态库生成和使用
Linux下动态库生成和使用 一.动态库的基本概念 1.动态链接库是程序运行时加载的库,当动态链接库正确安装后,所有的程序都可以使用动态库来运行程序.动态链接库是目标文件的集合,目标文件在动态链接库中 ...
- MySQL平滑删除数据的小技巧【转】
今天接到一位开发同学的数据操作需求,需求看似很简单,需要执行下面的SQL语句: delete from test_track_log where log_time < '2019-1-7 00: ...
- mysql 主从库同步
#主库修改my.ini [mysqld] server log-bin=mysql-bin binlog-do-db=demo #从库修改my.ini [mysqld] server replicat ...
- mysql从库Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: 'Could not find first log file name in binary log index file'报错处理
年后回来查看mysql运行状况与备份情况,登录mysql从库查看主从同步状态 mysql> show slave status\G; *************************** . ...
- MySQL 从库down机
MySQL 从库down机中午突然down机,重启后,从库同步报主键重复的错误. Could not execute Write_rows event on table operation_maste ...
随机推荐
- [系列] go-gin-api 路由中间件 - Jaeger 链路追踪(五)
概述 首先同步下项目概况: 上篇文章分享了,路由中间件 - 捕获异常,这篇文章咱们分享:路由中间件 - Jaeger 链路追踪. 啥是链路追踪? 我理解链路追踪其实是为微服务架构提供服务的,当一个请求 ...
- CCF 模拟试题——出现次数最多的数 官方答案解析及自己写的正确答案
前几天知道的CCF计算机职业资格认证考试,觉得好像比软考含金量高一些,就去了解了一下,做了模拟试题中的 “出现次数最多的数” 这道题,我的算法和官方答案算法不同,个人觉得觉得官方的好一点,没那么繁琐, ...
- day02小结
数据类型的转换 1,自动类型转换 byte,short,char-->int-->long-->float-->double (1)byte与byte,short与short, ...
- FreeSql (二十九)Lambda 表达式
FreeSql 支持功能丰富的表达式函数解析,方便程序员在不了解数据库函数的情况下编写代码.这是 FreeSql 非常特色的功能之一,深入细化函数解析尽量做到满意,所支持的类型基本都可以使用对应的表达 ...
- Android图片的缩放效果
一.概述 Android 图片要实现:手势滑动,双击变大,多点触控的效果. 其实是有一定难度的,我们需要用Matrix ,GestureDetector 等等需要完成一个复杂的逻辑才能实现,然而今天我 ...
- Java连载31-递归方法练习、面向对象
一.实现阶乘(一种用递归,一种普通方法) public static void main(String[] args) { System.out.println(factorial(5)); Syst ...
- Tomcat运行机制
Tomcat其实就是一个servlet的容器,因此,它在运行过程中,首先要做以下事情: 1.实现servlet api规范.如request.response.cookie.session等,容器对其 ...
- Redis的复制(Master/Slave)、主从复制、读写分离
1.什么是Redis的复制 行话:也就是我们所说的主从复制,主数据更新后根据配置和策略自动同步到备用机的master/slave机制,Mater以写为主,slave以读为主. 2.能干什么 2.1.读 ...
- Python获取列表中的最后一个或者倒数第几个的方案
print(members[3]) 灵魂所在“ - (负号 )” 我们先来创建一个列表,和php中的数组一样. members = ['张三','李四','王五','芳芳','小明','小王'] 按照 ...
- sql字段为逗号分开的字符串值的关联查询
1.TREE表: [strID] [int] IDENTITY(1,1) NOT NULL,[strName] [nvarchar](50) NOT NULL, 2.SubInfo CREATE TA ...