Redis | 第4章 Redis中的数据库《Redis设计与实现》
前言
参考资料:《Redis设计与实现 第二版》;
第二部分为单机数据库的实现,主要由以下模块组成:数据库、持久化、事件、客户端与服务器;
本篇将介绍 Redis 中的数据库;
1. Redis中的数据库
Redis服务器的所有数据库保存在
redis.h/redisService
结构的db数组中:struct redisService{
//...
//保存所有数据库的数组
redisDB *db;
//服务器的数据库数量
int dbnum;
//...
}
dbnum
属性由服务器配置的 database 选项决定,默认为 16;
Redis客户端数据库保存在在
redisClient
结构的db
属性:typedef struct redisClient{
//...
//记录客户端当前正在使用的数据库
redisDB *db;
} redisClient;
- 客户端通过修改目标数据库指针,让它指向 redisService.db 数组中的不同元素;
- 可以通过 SELECT index 命令来切换数据库;
数据库的定义在
redis.h/redisDb
结构中:typedef struct redisDb{
//...
//数据库键空间,保存数据库中所有的键值对
dict *dict;
//过期字典,保存着键的过期时间
dict *expires;
} redisDb;
- 键空间的键是数据库的键,每个键是一个字符串对象;
- 键空间的值是数据库的值,每个值可以是字符串对象、列表对象、哈希表对象、集合对象和有序集合对象中的一种;
2. 数据库的键空间
- 数据库键空间是一个字典,所有针对数据库的操作都是通过键空间字典来操作的;
- 在对键空间进行读写操作时,Redis 还会进行一些维护操作:
- 读取键后,会根据键是否存在更新服务器的键空间命中 keyspace_hits 次数或键空间不命中 keyspace_misses 次数。通过 INFO stats 命令查看属性;
- 读取键后,服务器会更新键的 LRU(最后一次使用时间)。通过 ONBJECT idlettime [key] 命令查看key的闲置时间;
- 服务器在读取键时发现键已经过期,会先删除这个过期键;
- 如果有客户端使用 WATCH 命令监视某个键,服务器对该键修改后会标记上脏
dirty
,让事务处理程序注意; - 服务器每修改一个键后,会对脏
dirty
键计数器值增 1,计数器会触发服务器的持久化以及复制操作;
3. 键的生成时间与过期时间
- 键的时间相关设置命令参看《Redis常用命令及示例总结》1.3 生存时间的功能;
- 生存时间:
- 客户端可以通过 EXPIRE 或 PEXPIRE 命令以秒或毫秒精度为数据库中某个键设置生存时间(Time To Live,TTL)。经过指定时间后,服务器自动删除生存时间为0的键;
- 可以通过 SETEX 命令在设置字符串键同时设置过期时间;
- 使用 TTL 或 PTTL 命令获取键的剩余生存时间;
- 过期时间:
- 客户端设置过期时间的命令是 EXPIREAT 或 PEXPIREAT;
- 过期时间是一个 UNIX 时间戳;
- EXPIRE、PEXPIRE 和 EXPIREAT 三个命令都会转换成 PEXPIREAT 命令实现;
4. Redis中的过期键删除策略
有三种删除过期键的策略:
- 定时删除:主动策略。对内存最友好,到期就释放内存。缺点是对CPU事件不友好,当过期键比较多时,会占用一部分CPU时间;
- 惰性删除:被动策略。对CPU时间最友好。每次从键空间获取键时,检查取得的键是否过期,过期则删除。缺点是对内存不友好;
- 定期删除:主动策略。前两种策略的整合与折中。每隔一段时间执行一次删除过期键操作,并通过限制删除操作执行的时长与频率减少删除操作对CPU时间的影响。缺点是难以确定删除操作执行的时长和频率;
惰性删除策略由
db.c/expireIfNeeded
函数实现,流程如下:
- 定期删除策略由
redis.c/activeExpireCycle
函数实现,每当Redis的服务器周期性操作redis.c/serverCron
函数执行时,activeExpireCycle 函数会被调用。在规定的时间内,分多次遍历服务器各个数据库,从数据库的expires
字典中随机检查一部分过期时间,删除其中过期键;
5. AOF、RDB和复制功能对过期键的处理
5.1 生成 RDB 文件
- 在执行 SAVE 或 BGSAVE 命令创建一个新的 RBG 文件时,程序会对数据库中的键进行检查,已过期的键不会被保存到新创建的 RDB 文件中;
5.2 载入 RDB 文件
- 载入 RDB 文件时:
- 若服务器以主服务器模式运行,过期键不载入;
- 若服务器以从服务器模式运行,所有键都会载入;
5.3 AOF 文件写入
- 当服务器以 AOF 持久化模式运行时,未被惰性删除和定期删除的过期键不会对 AOF 文件产生影响;
- 当过期键被惰性删除或定期删除后,程序会向 AOF 文件追加(append)一条 DEL 命令,显示记录该键已被删除;
5.4 AOF 重写
- 与 RDB 文件类似,在执行 AOF 重写过程中,程序会对数据库中的键进行检查,已过期的键不会被保存到重写后的 AOF 文件中;
5.5 复制
- 当服务器运行在复制模式下时,从服务器的过期键删除动作由主服务器控制;
6. 数据库通知
- 数据库通知是 Redis 2.8 版本新增的功能;
- 数据库通知可以让客户端通过订阅给定的频道或模式,来获知数据库中键的变化,以及数据库中命令的执行情况;
- Redis 命令对数据库进行修改后,服务器会根据配置向客户端发送数据库通知;
- 通知的相关命令可以参考 《Redis常用命令及示例总结》7. Pub/Sub(发布/订阅);
- 两类通知类型:
- 键空间通知 key-space notification:关注 “某个键执行了什么命令”;SUBSCRIBE channel:message;
- 键事件通知 key-event notification:关注 “某个命令被什么键执行了”;SUBSCRIBE channel:del;
- 服务器配置的
notify-keyspace-events
选项决定服务器所发送通知的类型:- AKE:发送所有类型的键空间和键事件通知;
- AK:发送所有类型的键空间通知;
- AE:发送所有类型的键事件通知;
- K$:只发送字符串有关的键空间通知;
- EL:只发送列表键有关的键事件通知;
- 发送数据库通知的功能是由
notify.c/notifyKeyspaceEvent
函数实现;
最后
新人制作,如有错误,欢迎指出,感激不尽!
欢迎关注公众号,会分享一些更日常的东西!
如需转载,请标注出处!
Redis | 第4章 Redis中的数据库《Redis设计与实现》的更多相关文章
- Redis | 第11章 服务器的复制《Redis设计与实现》
目录 前言 1. 旧版复制功能的实现 1.1 同步与命令传播 1.2 旧版复制功能的缺陷 2. 新版复制功能的实现 2.1 部分重同步的实现原理 3. PSYNC 命令的实现 4. 复制的详细步骤 4 ...
- Redis | 第12章 Sentinel 哨兵模式《Redis设计与实现》
目录 前言 1. 启动并初始化 Sentinel 2. Sentinel 与服务器间的默认通信 2.1 获取主服务器信息 2.2 获取从服务器信息 2.3 向主服务器和从服务器发送信息 3. 接受来自 ...
- 我的Android六章:Android中SQLite数据库操作
今天学习的内容是Android中的SQLite数据库操作,在讲解这个内容之前小编在前面有一篇博客也是讲解了SQLite数据库的操作,而那篇博客的讲解是讲述了 如何在Window中通过DOM来操作数据库 ...
- Redis 数据恢复方法,redis-port 工具将自建 redis 的 rdb文件同步到云数据库
1. Redis 恢复的机制 如果只配置 AOF ,重启时加载 AOF 文件恢复数据: 如果同时配置了 RDB 和 AOF ,启动是只加载 AOF 文件恢复数据: 如果只配置 RDB,启动是将加载 d ...
- Redis Installation、Configuration、Program Based On Redis Learning
目录 . Redis 简介 . Redis安装配置 . 编程使用Redis . 使用Lua脚本 1. Redis 简介 0x1: Redis是什么 Redis是一款Nosql类型的基于key-valu ...
- Android中SQLite数据库小计
2016-03-16 Android数据库支持 本文节选并翻译<Enterprise Android - Programing Android Database Applications for ...
- 一篇文章带你了解NoSql数据库——Redis简单入门
一篇文章带你了解NoSql数据库--Redis简单入门 Redis是一个基于内存的key-value结构数据库 我们会利用其内存存储速度快,读写性能高的特点去完成企业中的一些热门数据的储存信息 在本篇 ...
- PHP中的数据库三、redis
h2:first-child, body>h1:first-child, body>h1:first-child+h2, body>h3:first-child, body>h ...
- [转]Node.js中koa使用redis数据库
本文转自:https://blog.csdn.net/offbye/article/details/52452322 Redis是一个常用的Nosql数据库,一般用来代替Memcached做缓存服务, ...
随机推荐
- django3上线部署踩的坑
好久没有用过django写项目了,最近公司开发个官网,一时兴起就拿来练练手,这不用不知道,一用吓一跳啊. 才多久,版本都到3.0了. 踩坑一:运行项目时失败报错,后来查找资料发现, 当你使用djang ...
- UOJ 2021 NOI Day2 部分题解
获奖名单 题目传送门 Solution 不难看出,若我们单个 \(x\) 连 \((0,x),(x,0)\),两个连 \((x,y),(y,x)\) ,除去中间过对称轴的一个两个组,就是找很多个欧拉回 ...
- 洛谷3244 落忆枫音 (拓扑图dp+式子)
题目大意就是 给你一个DAG 然后添加一条边\(x->y\) ,询问以1为根的生成树的个数 QWQ 首先假设没有添加的边 答案就应该是 \[ans=\prod_{i=1}^{n} in[i] \ ...
- Pytorch 的安装
GPU版本的安装 Windows平台 CPU 版本安装 conda install pytorch torchvision cpuonly -c puython Windows平台需安装VC,需要的联 ...
- scala基础篇 源码中 :_*的作用
在scala源码中有大量的:_*,其作用是把Array.list转换为参数列表,作为变长参数传入参数列表 例子: def sumx(a:Int*)={ a.sum } val a=Range(1,9) ...
- 微信小程序 scroll-view 完成上拉加载更多
我们经常在软件客户端上看到这么一个功能,当我们阅读信息浏览到文章的末尾时,通常会加载出更多的信息.比如,我们在简书客户端上浏览推荐文章时,浏览到屏幕的末尾,此时又加载出了另一页的推荐文章,即实现了上拉 ...
- 21.6.4 test
\(NOI\) 模拟赛 太离谱了,碳基生物心态极限 \(T1\),字符串滚出OI,最后想了个区间dp,期望得分32pts,实际得分0pts,不知为啥挂了.正解是没学过的SAM. \(T2\),正解博弈 ...
- 正则表达式匹配 牛客网 剑指Offer
正则表达式匹配 牛客网 剑指Offer 题目描述 请实现一个函数用来匹配包括'.'和''的正则表达式.模式中的字符'.'表示任意一个字符,而''表示它前面的字符可以出现任意次(包含0次). 在本题中, ...
- Luogu P2827 [NOIp2016提高组]蚯蚓 | 神奇的队列
题目链接 80分思路: 弄一个优先队列,不停地模拟,切蚯蚓时就将最长的那一条出队,然后一分为二入队,简单模拟即可.还要弄一个标记,表示从开始到当前时间每一条蚯蚓应该加上的长度,操作时就加上,入队时就减 ...
- (四)FastDFS 高可用集群架构学习---后期运维--基础知识及常用命令
1.fastdfs 七种状态 FDFS_STORAGE_STATUS:INIT :初始化,尚未得到同步已有数据的源服务器 FDFS_STORAGE_STATUS:WAIT_SYNC :等待同步,已得到 ...