MySQL Disk--SSD 特性
=======================================================================
SSD 特性
1、随机读能力非常好,连续读性能一般,但比普通 SAS 磁盘好;
2、不存在磁盘寻道的延迟时间,随机写和连续写的响应延迟差异不大。
3、erase-before-write 特性,造成写入放大,影响写入的性能;
4、写磨损特性,采用 Wear Leveling 算法延长寿命,但同时会影响读的性能;
5、读和写的 I/O 响应延迟不对等(读要大大好于写),而普通磁盘读和写的 I/O 响应延迟差异很小;
6、连续写比随机写性能好,比如 1M 顺序写比 128 个 8K 的随即写要好很多,因为随即写会带来大量的擦除。
=======================================================================
SSD 基础知识
SSD(Solid State Drives)是固态硬盘,使用闪存颗粒来存储数据,闪存又可分为NAND Flash和NOR Flash,通常所说的SSD硬盘都使用NAND Flash芯片来存放数据。
NOR型存储内容以编码为主,其功能多与运算相关;
NAND型主要功能是存储资料。 Nor Flash:主要用来执行芯片上程序
优点:具有很好的读写性能和随机访问性能,因此它先得到广泛的应用;
缺点:单片容量较小且写入速度较慢,决定了其应用范围较窄。 NAND Flash:主要用在大容量存储场合
优点:优秀的读写性能、较大的存储容量和性价比,因此在大容量存储领域得到了广泛的应用;
缺点:不具备随机访问性能。
=======================================================================
SDD Flash规则
在对SSD中数据进行更改操作时,不能像HDD那样对原有数据进行覆盖更新,需要读取到整个页面的数据到缓存,然后更新缓存中的数据,再将更新后的数据写入到空的页面或已擦除的页面,将原有页面标示为无效。以页为单位进行数据写入,以Block为单位进行数据擦除。通常会将页设置为4KB,将Block设置为512KB。 每个Block的擦除次数有上限,擦除次数过多容易导致Block损坏。
=======================================================================
SSD 映射表(Mapping Table)
数据在实际存储单元的绝对地址被称为物理地址,数据在程序中使用的相对地址被称为逻辑地址,SSD在内部维护一张映射表,用来存储物理地址与逻辑地址的映射关系。
映射表使用DRAM(Dynamic Random Access Memory)来存放,方便快速访问,SSD会同时存放多份映射表,并且定期刷新映射表数据。
如果SSD因为断电等原因导致映射表损坏,就会导致整快SSD数据丢失。
=======================================================================
SSD 垃圾回收(Garbage Collection)
垃圾回收指将多块Block中的有效数据集中搬迁到新的Block上,将原有Block进行擦除以备新数据写入。
垃圾回收策略可分为主动垃圾回收策略和被动垃圾回收策略:
主动垃圾回收策略:通过周期性地任务来检查BLOCK的可用空间,主动对需要的BLOCK进行垃圾回收。
被动垃圾回收策略:当数据写入操作发生时,发现当前可用空间小于临界值,首先进行垃圾回收,然后再写入数据。
=======================================================================
SSD 磨损均衡(Wear Leveling)
由于每个BLOCK的擦除次数是有限的,即擦写寿命(Program/Erase Count,P/E值),为避免少数BLOCK被频繁擦除而导致损坏,因此广泛采用磨损均衡算法将写操作均匀分布到各闪存单元上,使得所有的闪存单元与整块盘的最大使用寿命保持在同以数据量级。 磨损均衡算法可分为两类:
动态WL,在对BLOCK进行擦写操作时,优先选择P/E值较低的BLOCK进行操作
静态WL,将P/E值降低的BLOCK数据移动到P/E值较高的BLOCK中存放。
=======================================================================
SSD 预留空间(Over Provisioning)
垃圾回收的前提是有足够的空闲空间来拷贝原BLOCK中有效数据,为避免因缺少空闲空间导致无法进行垃圾回收操作,需要预留一部分存储空间来备用。
预留空间除保证垃圾回收机制外,还用来存放SSD的系统数据如映射表、SSD固件、以及坏块信息等。
当预留空间值越大时,垃圾回收就会越快,写放大就会变小,整快盘的读写性能就会变得越好,但带来的坏处就是用户可用的空间变小。
另外SSD使用Spare Area(SA)区来标记坏块。
=======================================================================
SSD 写放大原因
假设需要在4K的数据页中追加2K的数据,先将该页现有数据读取到缓存,然后将2K新数据追加到缓存,然后挑选一个空的或者已擦除的页面来写入数据,将原数据页标记为无效。在选择空的活已擦除的页面时,如果触发"被动垃圾回收策略",需要将整个BLOCK中的有效数据读取到缓存,然后对整个BLOCK进行擦除,再将缓存中数据写入到BLOCK中,导致实际写入SSD中数据量远大于需求数据写入量,数据写入操作被放大,即SSD 写放大Write Amplification,简称WA。
容易引发SSD写放大场景:
1、SSD磁盘剩余空间较少,导致需要频繁进行垃圾回收释放资源
2、短时间内进行大量的数据删除和写入操作,SSD上存在大量需要回收的Block。
=======================================================================
SSD 断电保护
通常SSD会使用钽电容或者超级电容用作掉电后的供电设备,当检查到SSD断电后,电容设备提供电力来保证SSD将DRAM中缓存的数据写入闪存。 针对DRAM中数据,保护机制分为三种: 保护DRAM中所有数据
只保护DRAM中的用户数据
只保护DRAM中的映射表 如果断电保护机制失效,则很有可能导致SSD出现数据丢失,严重情况下会丢失所有数据。
=======================================================================
SSD与Linux IO调度
SSD在不同调度下的性能:
=======================================================================
摘抄自:
http://www.cnblogs.com/Christal-R/p/7230304.html
http://www.cnblogs.com/Christal-R/p/7246415.html
http://www.chinastor.com/baike/ssd/0322364312017.html
=======================================================================
MySQL Disk--SSD 特性的更多相关文章
- mysql的压缩特性-需求
需求:最近有个插入量比较大的应用需要上,每天的插入量在1亿左右,同时会有较少的查询,表的单行长度在0.5k,就数据而言每天有近50G数据,由于每天写一张新表,保留30天的数据,一个月下来也要1.5T, ...
- Mysql InnoDB三大特性-- change buffer
Mysql InnoDB三大特性-- change buffer
- Mysql InnoDB三大特性-- 自适应hash index
Mysql InnoDB三大特性-- 自适应hash index
- 个人MySQL的事务特性原理学习笔记总结
目录 个人MySQL的事务特性原理笔记总结 一.基础概念 2. 事务控制语句 3. 事务特性 二.原子性 1. 原子性定义 2. 实现 三.持久性 1. 定义 2. 实现 3. redo log存在的 ...
- MySql存储引擎特性对比
下表显示了各种存储引擎的特性: 其中最常见的两种存储引擎是MyISAM和InnoDB 刚接触MySQL的时候可能会有些惊讶,竟然有不支持事务的存储引擎,学过关系型数据库理论的人都知道,事务是关系型数据 ...
- mysql之数据库特性认识
最近面试经常被面试官问道关于数据库方面的知识,于是总结一下面试官问的题以及自己对数据库的认识 1.之前百度面试官问了我一个特别基础的sql问题:如何清除表的所有记录,以前在学校做项目开发的时候有使用过 ...
- Mysql存储引擎特性总结
几个常用存储引擎的特点 下面我们重点介绍几种常用的存储引擎并对比各个存储引擎之间的区别和推荐使用方式. 特点 Myisam BDB Memory InnoDB Archive 存储限制 没有 没有 有 ...
- mysql的高级特性-存储过程
定义: 存储例程是存储在数据库服务器中的一组sql语句,通过在查询中调用一个指定的名称来执行这些sql语句命令. 语法: DELIMITER // 声明语句结束符,用于区分; CEATE PROCED ...
- 【特性】MySQL 8 新特性
MySQL 8.0 正式版 8.0.11 已发布,官方表示 MySQL 8 要比 MySQL 5.7 快 2 倍,还带来了大量的改进和更快的性能! 注意:从 MySQL 5.7 升级到 MySQL 8 ...
- Mysql InnoDB三大特性-- double write
转自:http://www.ywnds.com/?p=8334 一.经典Partial page write问题? 介绍double write之前我们有必要了解partial page write( ...
随机推荐
- Sereja and Table CodeForces - 425B (暴力,状压)
大意: 给定01矩阵, 求翻转尽量少的数字, 使得所有0或1的连通块为矩形, 若至少要翻转超过k次, 输出-1
- Non-parseable POM 解决方法
两个build放在一起当然不行,把它们类似这样的合并起来.
- 『Collections』namedtuple_具名元组
namedtuple()类 需要两个参数,参数一为nametupe名称,参数二为字段一般为序列(多个字段) Python中存储系列数据,比较常见的数据类型有list,除此之外,还有tuple数据类型. ...
- dp练习(11)——石子并归
1048 石子归并 时间限制: 1 s 空间限制: 128000 KB 题目等级 : 黄金 Gold 题解 题目描述 Description 有n堆石子排成一列,每堆石子有一个重量w ...
- Ionic实现自定义返回按键事件
在 Android 和 Window 平台下,有时候我们需要监听返回按键的事件来进行相应的操作,也就是自定义返回按键事件.下面根据一个例子来讲解如何在 ionic 中自定义返回按键事件. 功能需求 首 ...
- python metaclass
看了很多类似的博客,这篇算是写的比较完善的,转载以备后期查看 原文: 一 你可以从这里获取什么? 1. 也许你在阅读别人的代码的时候碰到过metaclass,那你可以参考这里的介绍. 2. 或许你需要 ...
- 记python3 UnicodeEncodeError: 'latin-1' codec... 报错
python3用cx_Oracle查询oracle数据库并打印输出,在windows上执行没问题,打算放suse上跑的时候就遇到了打印中文UnicodeEncodeError: 'latin-1' c ...
- AngularJS----ngModelController
文档地址:https://docs.angularjs.org/api/ng/type/ngModel.NgModelController 首先声明:DOM value 与view value是完全不 ...
- redis的主从复制和高可用集群
一.redis的简介 Redis是一个开源的使用ANSI C语言编写.支持网络.可基于内存亦可持久化的日志型.Key-Value数据库,并提供多种语言的API.redis是一个key-value存储系 ...
- apsx 页面 if(!ispostback)其用法和作用 什么时候该用?
一个页面第一次显示的时候 isPostBack=false 然后你在这个页面上点击按钮或其它东西提交的时候, isPostBack=true 一般这个函数里面的内容是指第一次打开这个页面的时候要做的事 ...