高性能mysql 第1,2,3章。
一: 第一章
1:使用事务
start transaction;
select * from t1;
commit;
2:查看事务状态
mysql> show variables like 'autocommit';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| autocommit | ON |
+---------------+-------+
1 row in set
mysql中事务是默认提交的,也就是每个查询视为一个事务单独执行。如果想关闭事务的自动提交,可以使用set autocommit=0; 或者set autocommit=off;
3:设置 事务的隔离级别。 例如设置事务隔离级别为读写提交:
set session transaction isolation level read committed;
4:mysql的存储引擎 , 如果查询所有表的存储引擎可以使用show table status; 如果查询user表的存储引擎,可以使用下面的语句
mysql> show table status like 'user';
+------+--------+---------+------------+------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+---------------------+------------+-----------------+----------+----------------+---------+
| Name | Engine | Version | Row_format | Rows | Avg_row_length | Data_length | Max_data_length | Index_length | Data_free | Auto_increment | Create_time | Update_time | Check_time | Collation | Checksum | Create_options | Comment |
+------+--------+---------+------------+------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+---------------------+------------+-----------------+----------+----------------+---------+
| user | MyISAM | 10 | Dynamic | 0 | 0 | 0 | 281474976710655 | 4096 | 0 | 1 | 2018-07-14 20:33:02 | 2018-07-14 20:33:02 | NULL | utf8_general_ci | NULL | | |
+------+--------+---------+------------+------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+---------------------+------------+-----------------+----------+----------------+---------+
1 row in set
改变表的存储引擎
mysql> alter table test engine=InnoDB;
Query OK, 0 rows affected
5:想复制一张表的话,可以使用
mysql> create table test1 like test;
二: 第二章,测试
1:用http_load测试http下载
txt 文件
http://www.baidu.com/
https://map.baidu.com/
https://www.cnblogs.com/zhyunfe/p/6209074.html
sql
http_load -parllel 1 -seconds 10 test.txt;
2:慢查询日志
慢查询日志包括:被查询记录的时间,执行查询的用户,执行时间,查询语句,返回的行数。 可以分析可以的查询。
快查询日志包括:查询语句。
3: show profile; 可以显示查询的各个值。
mysql> show profile;
+----------------------+----------+
| Status | Duration |
+----------------------+----------+
| starting | 3E-5 |
| checking permissions | 6E-6 |
| Opening tables | 0.001018 |
| System lock | 1.7E-5 |
| init | 3.6E-5 |
| optimizing | 3E-6 |
| statistics | 8E-6 |
| preparing | 5E-6 |
| executing | 2E-6 |
| Sending data | 0.000215 |
| end | 1E-5 |
| query end | 4E-6 |
| closing tables | 6E-6 |
| freeing items | 8.4E-5 |
| logging slow query | 2E-6 |
| cleaning up | 4E-6 |
+----------------------+----------+
16 rows in set
第三章:数据库调优
1:整数类型:TINYINT,SAMLLINT,MEDIUMINT,INT,BIGINT 的位数分别为 8,16,24,32,64 ,修饰符:无符号数UNSIGNED,有符号数SIGNED
2:实数,float double decimal(10,5) 一般保存同样的数据,decimal占用空间更大。
3:varchar() 一般占用一到两个字节保存长度,如果varchar的长度为255。那么用一个字节表示长度。
4:text和blob, blob:类型有TINYBLOB,SMALLBLOB,BLOB,MEDIUMBLOB,LONGBLOB
text类型有:TINYTEXT,SMALLTEXT,TEXT,MEDIUMTEXT,LONGTEXT.
mysql把blob和text当成实体对象来处理。当数据过大时,innodb会使用单独的外部存储区域来进行保存。
mysql对blob和text的排序方式,是按照前若干个字节进行排序。不会按照完整长度进行排序。
5:将某些含有几个值的字段设置为enum类型, enum进行连接速度较快。
6:日期时间:datatime 是年月日,时分秒类型, timestamp是一个长整形。 date 年月日
7:位数据类型, BIT(1) 只占一位,可以保存true,false值,mysql将bit当做字符串类型。myisam中17位包装为3个字节
8:set, 在mysql中,集合set是指一个字段可以取集合的一个或者多个值
- create table test(field set('a','b'));
- //插入值可以为'a','b','1','2','3'
- //其中,1表示第一个值a,2表示第二个值b,3表示第一个值和第二个值,故随着集合内元素的增加,对应元素插入为1,2,4,8,16,32,64...
create table acl(perms set('can_read','can_delete','can_write') not null);
insert into acl(perms) values('can_read','can_delete');
select perms from acl where find_in_set('can_read',perms);
enum和set适合用来保存订单的状态,产品的类别,或性别这样的信息。
9:选择标识符,整数通常是标识符的最佳选择,因为它速度快。能使用auto_increment;
10:常见索引:B+树,hash索引(memory引擎里面的)。
mysql> create table t(id int not null) engine=memory;
Query OK, 0 rows affected mysql> show table status like 't1';
+------+--------+---------+------------+------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+-------------+------------+-------------------+----------+----------------+---------+
| Name | Engine | Version | Row_format | Rows | Avg_row_length | Data_length | Max_data_length | Index_length | Data_free | Auto_increment | Create_time | Update_time | Check_time | Collation | Checksum | Create_options | Comment |
+------+--------+---------+------------+------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+-------------+------------+-------------------+----------+----------------+---------+
| t1 | MEMORY | 10 | Fixed | 0 | 8 | 0 | 16777216 | 0 | 0 | NULL | 2018-08-25 22:28:51 | NULL | NULL | latin1_swedish_ci | NULL | | |
+------+--------+---------+------------+------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+-------------+------------+-------------------+----------+----------------+---------+
1 row in set
innodb会使用自适应hash索引,当一些索引值被频繁访问的时候,会在b树的顶端建立hash索引。
11:hash索引和b树的索引比较
hash索引更快O(1),但是不能排序。
hash索引只包含了hash码和指针,但不包含值。只支持 =,<=>,in 的比较,不支持price>1000的范围查询。
12:高性能索引策略
a:使用索引,首先要隔离列,例如 select * from t1 where f1+2=5; where后面有运算,这样就没有隔离列,不能使用索引。
b: 前缀索引, 只使用某一字段的前n个字符简历索引。
c:聚集索引,innodb使用的是B+树的聚集索引,因为在节点中保存了索引和数据
d:覆盖索引,如果一个索引包含(或覆盖)所有需要查询的字段的值,称为‘覆盖索引’。即只需扫描索引而无须回表。只需要读取索引(因为索引叶子节点中有需要的数据),而不需要读取行数据。
13:explain 可以对执行的语句进行解释
mysql> select * from t1;
+----+
| id |
+----+
| 1 |
+----+
1 row in set mysql> explain select * from t1;
+----+-------------+-------+--------+---------------+------+---------+------+------+-------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+--------+---------------+------+---------+------+------+-------+
| 1 | SIMPLE | t1 | system | NULL | NULL | NULL | NULL | 1 | |
+----+-------------+-------+--------+---------------+------+---------+------+------+-------+
1 row in set
14: 当where,group by等后面的条件语句中,条件字段被覆盖索引,可以将条件语句存放到子查询中。
这样就会对索引先进行扫描,然后进行连接。而不扫描多余的行数据。
mysql> explain select * from salarie where name='wangwu'; -- 全表扫描,包含行数据。
+----+-------------+---------+------+---------------+------+---------+------+------+-------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+---------+------+---------------+------+---------+------+------+-------------+
| 1 | SIMPLE | salarie | ALL | NULL | NULL | NULL | NULL | 27 | Using where |
+----+-------------+---------+------+---------------+------+---------+------+------+-------------+
1 row in set mysql> explain select * from salarie inner join (select id from salarie where name='wangwu') s on salarie.id=s.id; +----+-------------+------------+--------+---------------+------+---------+------+------+-------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+------------+--------+---------------+------+---------+------+------+-------------+
| 1 | PRIMARY | <derived2> | ALL | NULL | NULL | NULL | NULL | 11 | |
| 1 | PRIMARY | salarie | eq_ref | id | id | 4 | s.id | 1 | |
| 2 | DERIVED | salarie | ALL | NULL | NULL | NULL | NULL | 27 | Using where |
+----+-------------+------------+--------+---------------+------+---------+------+------+-------------+
3 rows in set
15:如果想重新使用索引并且它不会产生太多的条件组合,可以使用in() , 使用in()可以避免多个范围条件。
16:表修复命令 repair table
mysql> repair table t1;
+---------+--------+----------+---------------------------------------------------------+
| Table | Op | Msg_type | Msg_text |
+---------+--------+----------+---------------------------------------------------------+
| test.t1 | repair | note | The storage engine for the table doesn't support repair |
+---------+--------+----------+---------------------------------------------------------+
1 row in set
17: 修改表的存储引擎:alter table t1 engine=innodb;
18:查询表的索引:show index from t1;
mysql> show index from salarie;
+---------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+
| Table | Non_unique | Key_name | Seq_in_index | Column_name | Collation | Cardinality | Sub_part | Packed | Null | Index_type | Comment | Index_comment |
+---------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+
| salarie | 0 | id | 1 | id | A | 27 | NULL | NULL | | BTREE | | |
+---------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+
1 row in set
19:减少碎片和索引数据,可以使用optimize table 优化表,消除数据碎片
mysql> optimize table t1; -- 存储引擎不支持
+---------+----------+----------+-----------------------------------------------------------+
| Table | Op | Msg_type | Msg_text |
+---------+----------+----------+-----------------------------------------------------------+
| test.t1 | optimize | note | The storage engine for the table doesn't support optimize |
+---------+----------+----------+-----------------------------------------------------------+
1 row in set mysql> show table status like 't1';
+------+--------+---------+------------+------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+-------------+------------+-------------------+----------+----------------+---------+
| Name | Engine | Version | Row_format | Rows | Avg_row_length | Data_length | Max_data_length | Index_length | Data_free | Auto_increment | Create_time | Update_time | Check_time | Collation | Checksum | Create_options | Comment |
+------+--------+---------+------------+------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+-------------+------------+-------------------+----------+----------------+---------+
| t1 | MEMORY | 10 | Fixed | 1 | 8 | 258064 | 16777216 | 0 | 0 | NULL | 2018-08-26 08:39:11 | NULL | NULL | latin1_swedish_ci | NULL | | |
+------+--------+---------+------------+------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+-------------+------------+-------------------+----------+----------------+---------+
1 row in set mysql> alter table t1 engine=innodb; -- 修改存储引擎
Query OK, 1 row affected
Records: 1 Duplicates: 0 Warnings: 0 mysql> optimize table t1;
+---------+----------+----------+-------------------------------------------------------------------+
| Table | Op | Msg_type | Msg_text |
+---------+----------+----------+-------------------------------------------------------------------+
| test.t1 | optimize | note | Table does not support optimize, doing recreate + analyze instead |
| test.t1 | optimize | status | OK |
+---------+----------+----------+-------------------------------------------------------------------+
2 rows in set
20:正则化和非正则化
正则化,在正则化数据库中,每个因素只会被表达一次。非正则化总,信息是重复的。
这样就需要用到范式分解,如果正则化,每个表不能有重复信息。
第一范式:每个字段只能是原子域。A不能分解成字段B,C;
第二范式:不能存在部分函数依赖,例如字段A,B,C (A,B)主属性>C, 不能够存在(A)>B
第三范式:一个表中字段依赖,不能存在A(主属性)>B>C
BCNF: 在第三范式基础上,消除主属性对主属性的部分函数依赖与传递函数依赖,
第4范式: 多值依赖
正则化优缺点:a:跟新较快,因为表小,b:改动变小,因为没有重复数据 c: 容易装入内存,因为小 d:缺点:查询慢,需要连接。
21:缓存和汇总表
一般可以保留一个汇总表,以供使用,例如没半个小时对网站访问数量汇总一次,可以放到汇总表里面,缺点是不是实时准确的 ,优点是效率高。
select sum(cnt) from t1 where hr between concat(left(now(),14),'00.00')-interval 23 hour
and concat(left(now(),14),'00.00')-interval 1 hour;
不精确的统计或使用小范围查询以弥补时间间隔的精确统计-都比统计t1表中全部行要高效的多。
缓存表对于优化搜索和获取数据的查询时有用的。
22:计数表,记录一个小的表,用于统计用户数。点击次数等。
23: 加速alter table , 当修改某一列时,可以使用alter column,这个命令更改了.frm文件并且没有改动表。 任何modify column都会导致表重建。
mysql> alter table salarie modify column id tinyint(3) not null;
Query OK, 27 rows affected
Records: 27 Duplicates: 0 Warnings: 0 mysql> show status like 'last_query_cost';
+-----------------+-----------+
| Variable_name | Value |
+-----------------+-----------+
| Last_query_cost | 10.499000 |
+-----------------+-----------+
1 row in set mysql> alter table salarie alter column id set default 5;
Query OK, 0 rows affected
Records: 0 Duplicates: 0 Warnings: 0
24:快速建立MyISAM索引
高效加载MyISAM表的诀窍是:禁用键,加载数据,启动键
alter table t1 disable keys;
-- load the data
alter table t1 enable keys;
25:各个引擎的区别
myisam引擎:a: 表锁 b: 不支持自动数据恢复 c: 不支持事务 d: 只有索引被缓存在内存中 e: 紧密存储
memory引擎:a:表锁 b: 不支持动态行 c: hash索引是默认索引类型 d: 没有索引统计 e: 重启后丢失数据
innodb引擎: a:事务性 b:外键 c: 行级锁 d: 多版本 e: 按主键聚集 f: 所有索引包含主键列 ,索引按主键引用行。g: 优化的缓存 h:未压缩的索引 i:装载数据缓慢
j:阻塞auto_increment k:没有缓存的count(*) 值。
高性能mysql 第1,2,3章。的更多相关文章
- 高性能MySQL第2,3章性能相关 回顾笔记
1. 基准测试(benchmark) 不管是新手还是专家都要熟悉基准测试,benchmark测试是对系统的一种压力测试,目标是为了掌握在特定压力下系统的行为.也有其他原因:如重现系统状态,或者是 ...
- 高性能MySQL(第4版) 第一章 MySQL架构 读书笔记
这本书去年11月出的,今年中文版也出了,并且直接上了微信读书,之后有空就读一读,分享下读书笔记~ 原文内容比较充实,建议有时间可以读一下原文. 第一章主要是个概览. MySQL的逻辑架构 默认情况下, ...
- 高性能MySQL笔记:第1章 MySQL架构
MySQL 最重要.最与众不同的特性是他的存储引擎架构,这种架构的设计将查询处理(Query Precessing)及其系统任务(Server Task)和数据的存储/提取相分离. 1.1 MyS ...
- 高性能mysql 第6章 查询性能优化
查询缓存: 在解析一个sql之前,如果查询缓存是打开的,mysql会去检查这个查询(根据sql的hash作为key)是否存在缓存中,如果命中的话,那么这个sql将会在解析,生成执行计划之前返回结果. ...
- 高性能MySQL --- 读书笔记(1) - 2016/8/2
此书不但帮助MySQL初学者提高使用技巧,更为有经验的MySQL DBA指出了开发高性能MySQL应用的途径.全书包括14章,内容覆盖MySQL系统架构.设计应用技巧.SQL语句优化.服务器性能调优. ...
- 《高性能MySQL》
<高性能MySQL>(第3版)讲解MySQL如何工作,为什么如此工作? MySQL系统架构.设计应用技巧.SQL语句优化.服务器性能调优.系统配置管理和安全设置.监控分析,以及复制.扩展和 ...
- 《高性能MySQL(第3版)》【PDF】下载
内容简介 <高性能mysql(第3版)>是mysql 领域的经典之作,拥有广泛的影响力.第3版更新了大量的内容,不但涵盖了最新mysql5.5版本的新特性,也讲述了关于固态盘.高可扩展性设 ...
- 高性能MySQL(第3版) 中文PDF带目录清晰版
下载地址: <高性能MySQL(第3版)>编辑推荐:"只要你不敢以MySQL专家自诩,又岂敢错过这本神书?""一言以蔽之,写得好,编排得好,需要参考时容易到爆 ...
- 高性能mysql:创建高性能的索引
本文系阅读<高性能MySQL>,Baron Schwartz等著一书中第五章 创建高性能的索引的笔记,索引是存储引擎用于快速找到记录的一种数据结构. 索引对于良好的性能非常关键,尤其是当表 ...
- 《高性能MySQL》 读书总结
目录: 第一章.MySQL架构与历史 第二章.MySQL基准测试 第三章.服务器性能剖析 第四章.Schema与数据类型优化 第五章.创建高性能的索引 第六章.查询性能优化 第七章.MySQL高级特性 ...
随机推荐
- 【大数据系列】win10不借助Cygwin安装hadoop2.8
一.下载安装包 解压安装包并创建data,name,tmp文件夹 二.修改配置文件 1.core-site.xml <?xml version="1.0" encoding= ...
- 三元组顺序结构实现稀疏矩阵相加,行序优先(Java语言描述)
不用十字链表也可以稀疏矩阵相加时间复杂度最坏情况达到O(tuA + tuB);思路比较简单就不赘述了,代码如下: 三元组: package 行逻辑链接的顺序表实现稀疏矩阵的相乘; public cla ...
- 学习生活必须知道的网站或者App
转载自:https://www.douban.com/group/topic/89798480/ 学习方面: 1.网易公开课(http://v.163.com/special/test/alltest ...
- C# 压缩文件 ICSharpCode.SharpZipLib.dll
效果: 代码只能压缩文件夹里面的文件,不能压缩文件夹. 压缩前: 压缩后: 代码: 需要引用ICSharpCode.SharpZipLib.dll public ActionResult Index( ...
- 关于windows 7系统下开启休眠功能的方法
今天笔者新装了一个windows 7操作系统,装完后,点击开始按钮.鼠标放到关机处的左边扩展选项时,没有发现休眠选项. 于是开始上网查询解决方法,并将过程记录如下: 首先简单的介绍一下休眠功能:休眠( ...
- 【CF633H】Fibonacci-ish II 莫队+线段树
[CF633H]Fibonacci-ish II 题意:给你一个长度为n的序列$a_i$.m个询问,每个询问形如l,r:将[l,r]中的所有$a_i$排序并去重,设得到的新数列为$b_i$,求$b_1 ...
- [工具] 各种主流 SQLServer 迁移到 MySQL 工具对比
我之所以会写这篇对比文章,是因为公司新产品研发真实经历过这个痛苦过程(传统基于SQL Server开发的C/S产品转为MySQL云产品). 首次需要数据转换是测试环节,当时为了快速验证新研发云产品性能 ...
- [MySQL] MySQL x64 下载地址
MySQL http://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.14-winx64.ziphttp://dev.mysql.com/get/D ...
- INTRO: THE DAWN (亡灵序曲) 中独白
As the last ship sailed towards the distant horizon I sat there watching on a rock My mind slowly dr ...
- OC开发_Storyboard——MapKit
一.Core Location 1.基本对象 @propertys: coordinate, altitude, horizontal/verticalAccuracy, timestamp, sp ...