记一次字符串末尾空白丢失的排查 → MySQL 是会玩的!
开心一刻
今天答应准时回家和老婆一起吃晚饭,但临时有事加了会班,回家晚了点
回到家,本以为老婆会很生气,但老婆却立即从厨房端出了热着的饭菜
老婆:还没吃饭吧,去洗下,来吃饭吧
我洗好,坐下吃饭,内心感动十分;老婆坐旁边深情的看着我
老婆:你知道谁最爱你吗
我毫不犹豫道:你
老婆:谁最关心你?
我:你
老婆:我是谁呀?
我:我老婆
老婆:那你以后是不是得对我好点?
这时电话响了,一看好哥们打过来的,我接了并开了免提
哥们:楼下洗浴八折,干啥呢?
我:那个......,在陪我前妻吃口饭
问题背景
一天,小伙伴找到我,他说他碰到一个很奇怪的问题
他说:明明表名的入参是 test ,为什么展示到界面的记录包括 test 这条记录?
他补充道:会不会是 MyBatis-Plus 做了什么骚操作,把 test 末尾的空格给拿掉了
我:你直接把 SQL 语句到 MySQL 执行下试试
结果如下:
这看起来不够直观,我移动下光标
然后我和小伙伴面面相觑
环境准备
MySQL5 、 MySQL8 各准备一个
我们来看下默认情况下,末尾空白的判断情况
MySQL 5.7.36 如下
1 表示 TRUE ,也就是相等
MySQL 8.0.27 如下
0 表示 FALSE ,表示不相等
这是什么原因,我们继续往下看
字符集与字符序
比较肯定就需要比较规则, SQL 的比较规则就离不开字符序,字符序又与字符集相关,所以我们一个一个来捋
字符集
关于字符集,不是只言片语可以说清楚的,但是大家也不用担心,网上相关资料已经非常多,大家擦亮慧眼去查阅即可
简单点来说:字符集定义了字符和字符的编码
有人又问了:字符、字符的编码又是什么?
为了方便大家理解,举个简单栗子
有四个字符:A、B、C、D,这四个字符的编码分别是 A = 0, B = 1, C = 2, D = 3
这里的字符(A、B、C、D) + 编码(0、1、2、3)就构成了字符集(character set)
MySQL 支持的字符集有很多,可以通过 SHOW CHARACTER SET; 查看
Charset :字符集名
Description :描述
Default collation :默认字符序
Maxlen :每个字符最多字节数
字符序
定义了字符的比较规则;字符间的比较按何种规则进行
一个字符集对应多个字符序,通过 SHOW COLLATION; 可以查看全部的字符序;也可以带条件查具体某个字符集的字符序
Default 等于 Yes 表示是默认字符序
每个字符集都有默认的字符序
server的字符集与字符序
当我们创建数据库时,没有指定字符集、字符序,那么server字符集、server字符序就会作为该数据库的字符集、字符序
database的字符集与字符序
指定数据库级别的字符集、字符序
同一个MySQL服务下的数据库,可以分别指定不同的字符集、字符序
创建、修改数据库的时候,可以通过 CHARACTER SET 、 COLLATE 指定数据库的字符集、字符序
可以通过
查看数据库的字符集和字符序
table的字符集与字符序
创建、修改表的时候,可以通过 CHARACTER SET 、 COLLATE 指定表的字符集、字符序
可以通过
查看表的字符序
column的字符集与字符序
类型为 CHAR 、 VARCHAR 、 TEXT 的列,可以指定字符集、字符序
可以通过
查看字段的字符集和字符序
多个维度指定字符集、字符序的话,粒度越细的优先级越高( column > table > database > server )
如果细粒度未指定字符集、字符序,那么会继承上一级的字符集,字符序则是上一级字符集的默认字符序
通常情况下我们一般不会指定 table 、 column 粒度的字符集、字符序
也就是说,通常情况下 column 的字符集会与 database 的字符集一致,而 column 的字符序则是 database 字符集的默认字符序
空白丢失
上面讲了那么多,跟空白丢失有什么关系?
大家先莫急,继续往下看
MySQL5.7 The CHAR and VARCHAR Types中有这么一段
翻译过来就是:
1、类型是 CHAR 、 VARCHAR 、 TEXT 列的值,会根据列的字符序来比较和排序
2、所有 MySQL 排序规则的类型都是 PAD SPACE 。这就意味着, CHAR 、 VARCHAR 、 TEXT 类型的值进行比较时,不用考虑任何末尾空格,LIKE 除外
3、不受 SQL mode 影响,也就是说不管是严格模式,还是非严格模式,都不影响 2 所说的规则
划重点,记笔记:在 MySQL5.7 及以下( <=5.7 )版本中,排序规则都是 PAD SPACE ,末尾的空格会忽略不考虑
那如何让末尾空格参与比较了,有三种处理方式
1、 BINARY ,类似 SELECT 'test' = BINARY 'test ';
2、 LIKE ,类似 SELECT 'test' LIKE 'test ';
3、 LENGTH 函数,类似
MySQL8 做了调整,The CHAR and VARCHAR Types 有如下说明
翻译过来就是:
1、类型是 CHAR 、 VARCHAR 、 TEXT 列的值,会根据列的字符序来比较和排序
2、 MySQL 字符序的 pad 参数的可选值,除了 PAD SPACE ,还增加了 NO PAD
3、对于非二进制字符串( CHAR 、 VARCHAR 、 TEXT ),字符序 pad 参数决定如何去处理字符串末尾的空格
NO PAD 不会忽略末尾空格,会将其当做其他字符一样对待
PAD SPACE 会忽略末尾空格, LIKE 除外
SQL mode 不参与字符串末尾空格的处理
MySQL8 server 维度的字符集是 utf8mb4 ,对应的默认字符序是: utf8mb4_0900_ai_ci
Pad_attribute 的值是 NO PAD ,也就是不会忽略字符串末尾的空格
所以在 MySQL8 中, SELECT 'test' = 'test '; 默认情况下得到的结果是 0
总结
1、非二进制字符串( CHAR 、 VARCHAR 、 TEXT )比较时,末尾空格的处理跟列的字符序有直接关系
2、 MySQL5.7 及之前的版本,排序规则的类型都是 PAD SPACE ,会忽略字符串末尾的空格, LIKE 除外
3、 MySQL8 开始,字符序增加了一个参数 Pad_attribute ,该参数的值不同,对字符串末尾空格的处理方式不同
NO PAD :字符串末尾的空格会和其他字符一样,不会被忽略
PAD SPACE :字符串末尾的空格会被忽略, LIKE 除外
4、如上针对的都是非二进制字符串的排序和比较,而不是储存
参考
记一次字符串末尾空白丢失的排查 → MySQL 是会玩的!的更多相关文章
- 【Python】删除字符串的空白
在程序中,额外的空白可能让人迷惑,对于程序员来说,'python'跟'python '看起来几乎一样,但是对于程序来说,可是千差万别 (lstrip)删除开头空白 >>> Langu ...
- mysql 字符串转数据丢失精度,mysql转换丢失精度,mysql CAST 丢失精度
mysql 字符串转数据丢失精度,mysql转换丢失精度,mysql CAST 丢失精度 =============================== ©Copyright 蕃薯耀 2017年9月1 ...
- sql server2005版本中,len函数计算了字符串末尾的空格
sql server2005版本中,len函数计算了字符串末尾的空格的长度,以下是测试脚本: print @@version declare @v varchar(max) set @v = 'hp, ...
- 解Bug之路-记一次中间件导致的慢SQL排查过程
解Bug之路-记一次中间件导致的慢SQL排查过程 前言 最近发现线上出现一个奇葩的问题,这问题让笔者定位了好长时间,期间排查问题的过程还是挺有意思的,正好博客也好久不更新了,就以此为素材写出了本篇文章 ...
- Oracle数据库丢失表排查思路
Oracle数据库丢失表排查思路 说明:由于系统采用ID取模分表法进行Oracle数据存储,某日发现Oracle数据库中缺少对应的几张业务数据表,遂进行相关问题查询,简单记录一下排查思路: 由于我们代 ...
- (转载)用PHP正则表达式清除字符串的空白
(转载)http://www.chinaz.com/program/2009/0220/67569.shtml 我们经常会处理来自用户输入或从数据库中读取的数据,可能在你的字符串中有多余的空白或制表符 ...
- python 去除字符串末尾的子串
建议使用 "字符串".replace("要去除的字符串", "") 尽量不要使用 strip() ,有时会引入意想不到的结果.strip() ...
- mysql 字符串数值计算 精度丢失
我进行了一些测试.truncate(abs('414')/100,2)truncate('414'/100,2)truncate('4.14',2)truncate('4.1400',2)都有精度丢失 ...
- C字符串末尾的'\0'问题
C语言的字符串要注意最后一位默认是'/0'的问题.这是一个易错点. strlen()计算长度时不考虑末尾的'\0' //例1 void test1() { ]; "; strcpy( str ...
- 汇编字符串末尾以00H或 0AH和00H结尾
例如:db 'hello',0 用 C 语言百定义字符串时,编译软件会自动在字符串的末尾,加上一个零('\0').作为度字符串结束的标记. 用汇编的 DB 伪指令定义字符串,编译软件没有自动加上零的功 ...
随机推荐
- 方差分析3——正交表与正交实验设计(R语言)
正交试验设计(orthogonal design简称正交设计(orthoplan),是利用正交表(orthogonal table)科学地安排与分析多因素试验的方法,是最常用的试验设计之一.正交表是一 ...
- LLaMA:开放和高效的基础语言模型
LLaMA:开放和高效的基础语言模型 论文:https://arxiv.org/pdf/2302.13971.pdf 代码:https://github.com/facebookresearch/ll ...
- [Linux]./configure | make | make install的工作过程与原理
经常使用的Linux编译/安装命令,有必要了解一下原理了. step1 ./configure 配置与编译前检查 通常由软件开发商编写一个检测程序(configure或config)来检测用户的操作环 ...
- Ubuntu-管理开机自启动服务
1. 管理服务启停工具 systemctl -- 将应用程序抽象为一个service,然后对这个service进行创建.启停.状态查看.配合journalctl进行日志管理 子命令 效果 start ...
- Django笔记三十四之分页操作
本文首发于公众号:Hunter后端 原文链接:Django笔记三十四之分页操作 这一篇笔记介绍一下如何在 Django 使用分页. Django 自带一个分页的模块: from django.core ...
- 「学习笔记」2-SAT问题
SAT 是适定性 (Satisfiability) 问题的简称.一般形式为 k - 适定性问题,简称 k-SAT.而当 \(k>2\) 时该问题为 NP 完全的.所以我们只研究 \(k=2\) ...
- css知识点简记
1.改变position: fixed; 定位基准元素的方式,父级以上元素的: ① tranform属性值不为none的元素 ② perspective值不为none的元素 ③ will-change ...
- vue3 + vite 多项目多模块打包
vue3 + vite 多项目多模块打包 本示例基于vite-plugin-html插件,实现多个独立项目共存,共享组件和依赖,运行.打包互不干扰. npm create vite@latest 兼容 ...
- iOS中的3种定时器
在iOS中有3种常见的定时器,它们会根据不同的场景进行选择使用. 1.DispatchSourceTimer: 基于GCD实现. 2.CADisplayLink:基于屏幕刷新实现. 3.Timer:基 ...
- 2022-09-27:给定一个棵树, 树上每个节点都有自己的值,记录在数组nums里, 比如nums[4] = 10,表示4号点的值是10, 给定树上的每一条边,记录在二维数组edges里, 比如ed
2022-09-27:给定一个棵树, 树上每个节点都有自己的值,记录在数组nums里, 比如nums[4] = 10,表示4号点的值是10, 给定树上的每一条边,记录在二维数组edges里, 比如ed ...