Redis基础01-redis的数据结构
参考书:《redis设计与实现》
Redis虽然底层是用C语言写的,但是底层的数据结构并不是直接使用C语言的数据结构,而是自己单独封装的数据结构;
Redis的底层数据结构由,简单动态字符串,链表,字典,跳跃表,整数集合等几种数据结构组成;
1.简单动态字符串
1.定义:
简单动态字符串:SDS(simple dynamic string)redis 自己构建的;数据结构如下:
struct sds{
int free;//未使用长度
int len;//字符长度
char buff[];//字符数组
}
结尾的一个字节不算在len的长度里面;
2.SDS和C字符串的差别
相同点:都是n+1的长度,都是以\0结尾;
不同点:1.获取字符串长度复杂度不同;
2.杜绝缓存区溢出
3.减少字符修改造成的内存再分配次数; 3.1空间预分配;3.2惰性空间释放;
4.二进制安全;
5.兼容部分C字符串;
2.链表
1.链表和节点的实现
struct listNode{
struct listNode *prev;
struct listNode *next;
void *value;
}
typeof struct list{
listNode *head;//第一个
listNode *tail;//最后一个节点
unsigned int len;//长度
void *(*dup)(void *ptr);//复制节点函数
void (*free)(void *ptr);//节点值释放函数
int (*match)(void *ptr,void *key)//节点比对函数 }list;
特点:双端(链表带有pre和next两个指针);
无环(表头的pre和表尾的next都是NULL);
带表头指针和表尾指针;
求链表长度计数器(len是链表节点的计数器),
多态(dup,free,match三个属性设置特定类型,可以保存不同类型的值)
3.字典
1.定义及实现
字典:又称符号表,关联数组或映射,是一种用于保存键值对的抽象数据结构;
在字典中,一个字和一个值进行关联,这些键和值就称为键值对;
redis的字典使用哈希表作为底层实现,一个哈希表里面可以有多个哈希表节点,而每个哈希表节点就保存了字典中的一个键值对
- 哈希表
typedef struct dictht{
dictEntry **table;//哈希表数组
unsigined long size;//哈希表数组大小
unsigined long sizemask;//哈希表大小掩码,值总是size-1
unsigined long used;//哈希表数组已有节点的数量
}
哈希表节点
typeof struct dictEntry{
void *key;//键
union{//值
void *val;
uint64_tu64;
int64_ts64;
} v;
struct dictEntry *next;//指向另一个哈希表节点的指针,可以将多个哈希值相同的键值对连接在一次
}
字典
typedef struct dist{
dictype *type;//类型特定函数
void *privdata;//私有数据
dictht ht[];//哈希表
in trehashidx;//rehash索引//当rehash不在进行时,值为-1
}dict; typedef struc dictType{
unsigned int (*hashFunction)(const void *key);//计算哈希值的函数
void *(*keyDup)(void *privdata,const void *key);//复制键的函数
void *(*valDup)(void *privdata,const void *obj);
int (*keyCompare)(void *privdata,const void *key1,const void *key2);
void (*keyDestructor)(void *privdata,void *key);
void (*valDestructor)(void *privdata,void * obj);
} dictType ;
2.哈希算法
MurmurHash算法来计算键的哈希值。
3.解决键冲突
当两个键或者两个以上键分配到redis同一索引的时候,就称为键冲突;使用链地址法来解决键冲突;
4.rehash重新散列
目的:为了让平衡因子维持再一个合理的范围,k-v不会太多,也不会太少
5.渐进式rehash
分步进行rehash,为字典分配两个哈希表,当对一个哈希表操作时,程序在指定的操作上,会把旧表中的数据带到新的哈希表。到某一点完全实现rehash.
4.跳跃表
跳跃表 是一种有序数据结构,它可以在每个节点中维持多个只指向其他节点的指针,从而达到快速访问节点的目的。
使用的场景:在redis中,一个是实现有序集合键;一个是集群节点中用作内部数据结构;
1.跳跃表节点
结构代码:
5.整数集合
当一个集合质保和整数值元素,并且这个集合的元素数量不多时;
1.整数集合的实现
整数集合是Redis用于保存整数值的集合抽象数据结构;
typedef struct intset{
uint32_t encoding;//决定contents里面保存的数据类型
uint32_t length;//整数集合包含的元素数量
int8_t contents[];
}inset;
2.升级
当新元素比整数集合中所有元素的类型都要长时,整数集合需要先升级,再将元素保存到集合里面;
步骤:1.根据新元素,扩展底层类型;2.将所有元素转换成新元素类型,并保证底层顺序不变;3.将新元素添加到底层里面;
优点:1.提高灵活性,如果是int_32的就存储相关的元素,如果有int_64的就升级;2.节省内存资源;
3.降级
整数集合不支持降级
6.压缩列表
是一种节约内存而开发的顺序型数据结构;
使用场景:当一个列表项,只有少量数据,且数据比较小,小整数或者短字符的情况下;
1.压缩列表的构成
2.压缩列表节点的构成
previous_entry_length:记录前一个结点的长度;
encoding:记录content属性所保存的数据和长度;
content:保存节点的值;
3.连锁更新
每个previous_entry_length属性都记录前一个界定啊的长度:
如果节点小于254,则需要用1字节长的空间保存这个长度值;如果大于或等于254字节,则用5字节长的空间保存这个长度值
Redis基础01-redis的数据结构的更多相关文章
- Redis 02: redis基础知识 + 5种数据结构 + 基础操作命令
Redis基础知识 1).测试redis服务的性能: redis-benchmark 2).查看redis服务是否正常运行: ping 如果正常---pong 3).查看redis服务器的统计信息: ...
- Redis基础(一)数据结构与数据类型
Redis数据结构 Redis一共有六种数据结构,分别是简单动态字符串.链表.字典.跳表.整数集合.压缩列表. 简单动态字符串(SDS) Redis只会使用C字符串作为字面量,在大多数情况下,Redi ...
- Redis基础---5个基本数据结构(比较性记忆)
“ Redis是一个内存数据库,只用硬盘来进行持久化. Mongodb是半内存数据库 Mysql是硬盘数据库 ” 1. Redis启动 安装好了之后.运行redis-3.2.8/src/下的redis ...
- Redis 基础:Redis 简介及安装
Remote Dictionary Server(Redis)是一个由Salvatore Sanfilippo写的key-value存储系统.Redis是一个开源的使用ANSI C语言编写.遵守BSD ...
- redis基础及redis特殊场景使用描述
数据类型 String set list hash zset redis原理 单线程:redis是单线程+io多路复用:检查文件描述的就绪状态 对比memchached:多线程+锁 redis优势 解 ...
- Redis 基础:Redis 数据类型
Redis 数据类型 Redis支持五种数据类型:string(字符串).hash(哈希).list(列表).set(集合)及zset(sorted set:有序集合). String(字符串) st ...
- Redis 实战 —— 01. Redis 数据结构简介
一些数据库和缓存服务器的特性和功能 P4 名称 类型 数据存储选项 查询类型 附加功能 Redis 使用内存存储(in-memory)的非关系数据库 字符串.列表.哈希表.集合.有序集合 每种数据类型 ...
- Redis基础—了解Redis是如何做数据持久化的
之前的文章介绍了Redis的简单数据结构的相关使用和底层原理,这篇文章我们就来聊一下Redis应该如何保证高可用. 数据持久化 我们知道虽然单机的Redis虽然性能十分的出色, 单机能够扛住10w的Q ...
- Redis 基础:Redis 事件处理
Redis 事件处理 Redis服务器是一个事件驱动程序,服务器需要处理以下两类事件: 文件事件(file event):Redis服务器通过套接字与客户端(或其他Redis服务器)进行连接,而文件事 ...
- Redis 基础:Redis 配置
Redis 配置 Redis的配置文件位于Redis安装目录下,文件名为redis.conf.可以通过CONFIG命令查看或设置配置项.其语法为: # Redis CONFIG命令格式如下: > ...
随机推荐
- java实现第五届蓝桥杯斐波那契
斐波那契 标题:斐波那契 斐波那契数列大家都非常熟悉.它的定义是: f(x) = 1 .... (x=1,2) f(x) = f(x-1) + f(x-2) .... (x>2) 对于给定的整数 ...
- Linux 日志轮替
日志轮替包括两个方面的内容:切割日志文件,轮换日志文件 日志文件的命令规则 如果配置文件中有dateext参数,那么日志文件的后缀会是日期,例如:yum.log-20200424,这样,文件名不会重叠 ...
- QPS、TPS、并发用户数、吞吐量关系
1.QPS QPS Queries Per Second 是每秒查询率 ,是一台服务器每秒能够相应的查询次数,是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准, 即每秒的响应请求数,也即 ...
- 如何0基础学习C/C++?
谈及C/C++,功能强大.应用广泛,一旦掌握了后,若是再自学其他语言就显得轻而易举了.那为什么学C/C++的人少呢?很多人认为C/C++虽然博大精深,但也难学.其实就本人认为C/C++并非是“diff ...
- 嵌入式Linux学习笔记(六) 上位机QT界面实现和串口通讯实现
目录 (1).参考资料 (2).QT界面布局实现 (3).数据和操作逻辑 在上一章我们实现了下位机的协议制定,并通过串口通讯工具完成了对设备内外设(LED)的状态修改,下面就要进行上位机软件的实现了( ...
- SpringSceurity(3)---图形验证码功能实现
SpringSceurity(3)---图形验证码功能实现 有关springSceurity之前有写过两篇文章: 1.SpringSecurity(1)---认证+授权代码实现 2.SpringSec ...
- mac 排查被占端口
Last login: Wed Sep :: on ttys000 sam:~ sam$ sudo lsof -i : Password: COMMAND PID USER FD TYPE DEVIC ...
- Spark-stream,kafka结合
先列参考文献: Spark Streaming + Kafka Integration Guide (Kafka broker version 0.10.0 or higher):http://spa ...
- 浏览器端如何使用VConsole.js调试代码?
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8&quo ...
- python基础003----标准数据类型
一.标准数据类型 在python中,只要定义了一个变量,而且它有数据,那么它的类型就已经确定了,不需要开发者主动去说明它的类型,系统会自动识别.可以用type(变量名)来查看变量的类型.常见的变量类型 ...