1.gfifo概述

gfifo是一个First In First Out数据结构,它采用环形循环队列的数据结构来实现;它提供一个无边界的字节流服务,最重要的一点是,它使用并行无锁编程技术,即当它用于只有一个入队线程和一个出队线程的场情时,两个线程可以并发操作,而不需要任何加锁行为,就可以保证gfifo的线程安全。

struct gfifo {
unsigned char *buffer; /* the buffer holding the data */
unsigned int size; /* the size of the allocated buffer */
unsigned int in; /* data is added at offset (in % size) */
unsigned int out; /* data is extracted from off. (out % size) */
};

这是gfifo的数据结构,gfifo主要提供了两个操作,gfifo_put(入队操作)和gfifo_get(出队操作)。 它的各个数据成员如下:

buffer, 用于存放数据的缓存

size, buffer空间的大小,在初化时,将它向上扩展成2的幂

in, out, 和buffer一起构成一个循环队列。 in指向buffer中队头,而且out指向buffer中的队尾,它的结构如示图如下:

2. gfifo_alloc 分配gfifo内存和初始化工作

gfifo->size的值总是在调用者传进来的size参数的基础上向2的幂扩展,这是linux内核一贯的做法。这样的好处不言而喻--对gfifo->size取模运算可以转化为与运算,如下:

gfifo->in % gfifo->size 可以转化为 gfifo->in & (gfifo->size – 1)

在gfifo_alloc函数中,使用size & (size – 1)来判断size 是否为2幂,如果条件为真,则表示size不是2的幂,然后调用roundup_pow_of_two将之向上扩展为2的幂。

3. gfifo_put和gfifo_get,巧妙的入队和出队操作,无锁并发

gfifo_put是入队操作,它先将数据放入buffer里面,最后才修改in参数;
gfifo_get是出队操作,它先将数据从buffer中移走,最后才修改out。
in和out两者各司其职。计算机科学家已经证明,当只有一个读经程和一个写线程并发操作时,
不需要任何额外的锁,就可以确保是线程安全的,也即gfifo使用了无锁编程技术,以提高kernel的并发。

这里以gfifo入队为例(出队原理相同)

gfifo每次入队,gfifo->in只是简单地gfifo->in += len,因此gfifo->in总是一直增大(意思是gfifo->in会比size大),直到unsigned in最大值时,又会绕回到0这一起始端。但始终满足gfifo->out < gfifo->in,除非gfifo->in回绕到了0的那一端,即使如此,代码中计算长度的性质仍然是保持的。

我们先用简单的例子来形象说明这些性质吧:
当有数据入队时,那么in的值可能超过gfifo->size的值,那么我们使用另一个虚拟的方框来表示in变化后,在buffer内对gfifo->size取模的值。如下图如标:

当用户调用gfifo_put函数,入队的数据使gfifo的内存关系,引起上述两图的变化时,要拷贝两次内存。

因为入队数据,一部存放在gfifo->buffer的尾部,另一部分存放在gfifo->buffer的头部,计算公式非常简单。

rest = gfifo->size – gfifo->in & (gfifo->size – 1) 表示in下标到buffer末尾,还有多少空间(该空间大小未必就是合理大小,说不定比实际可用空间要大)。

如果len表示需要拷贝的长度的话,那么len - rest则表示有多少字节需要拷贝到buffer开始之处。

这样,我们读gfifo_put代码就很容易了。

len = min(len, fifo->size - (fifo->in - fifo->out));

fifo->in – fifo->out表示队列里面已使用的空间大小,fifo->size - (fifo->in – fifo->out)表示队列未使用的空间,

因此len = min(…),取两者之小,表示实际要拷贝的字节数。

拷贝len个字符数,fifo->in到buffer末尾所剩的空间是多少,这里面计算:

rest = min(len, fifo->size - (fifo->in & (fifo->size - 1)));

memcpy(fifo->buffer + (fifo->in & (fifo->size - 1)), buffer, rest);

拷贝到buffer开始之处
memcpy(fifo->buffer, buffer + l, len - rest);

rest表示len或fifo->in到buffer末尾所剩的空进行间大小的最小值,因为需要拷rest字节到fifo->buffer + fifo->in的位置上;
那么剩下要拷贝到buffer开始之处的长度为len – rest,当然,此值可能会为0,为0 时,memcpy函数不进行任何拷贝。

所有的拷贝完成后(可能是一次,也可能是两次memcpy),fifo->in 直接 += len,不需要取模运算。

当fifo->in超过了unsigned int的最大值时,而回绕到0这一端,上述的计算公式仍然正确

因为fifo->size的大小是2的幂,而unsigned int空间的大小是2 ^ 32,后者刚好是前者的倍数。如果从上述两个图的方式来描述,则表示unsigned int空间的数轴上刚好可以划成一定数量个gfifo->size大小方框,没有长度多余。这样,fifo->in 对fifo->size取模后,刚好落后对应的位置上。

现在假设往gfifo加入数据后,使用fifo->in < fifo->out关系,如下:

假设gfifo中数据的长度为leftdata,那么fifo->in和fifo->out有这样的关系:fifo->in = fifo->out + leftdata,并且fifo->in < fifo->out

这说明fifo->in 回绕到0这一段了,尽管如此,fifo->in和fifo->out的差距还是保持的,没有变化。即fifo->in – fifo->out仍然是leftdata

那么此时的可用空间是 fifo->size – leftdata = fifo->size - (fifo->in – fifo->out) = fifo->size – fifo->in + fifo->out。

因此无论fifo->in和fifo->out谁大谁小,计算fifo剩余空间大小的公式fifo->size – fifo->in + fifo->out都正确,

故可以保证gfifo_put函数里面的长度计算均是正确的。

Sword 内核队列一的更多相关文章

  1. Sword 内核队列二

    #ifndef __GTC_FIFO_H_ #define __GTC_FIFO_H_ #ifndef GTC_MAX #define GTC_MAX(a,b) ((a) > (b) ? (a) ...

  2. 2017-2018-1 20179205《Linux内核原理与设计》第四周作业

    <Linux内核原理与分析> 视频学习及实验操作 Linux内核源代码 视频中提到了三个我们要重点专注的目录下的代码,一个是arch目录下的x86,支持不同cpu体系架构的源代码:第二个是 ...

  3. 《Linux内核设计与实现》读书笔记(六)- 内核数据结构

    内核数据结构贯穿于整个内核代码中,这里介绍4个基本的内核数据结构. 利用这4个基本的数据结构,可以在编写内核代码时节约大量时间. 主要内容: 链表 队列 映射 红黑树 1. 链表 链表是linux内核 ...

  4. 【旧文章搬运】Windows内核常见数据结构(基本类型)

    原文发表于百度空间,2008-7-23 ========================================================================== 学内核从基 ...

  5. 初探内核之《Linux内核设计与实现》笔记上

    内核简介  本篇简单介绍内核相关的基本概念. 主要内容: 单内核和微内核 内核版本号 1. 单内核和微内核   原理 优势 劣势 单内核 整个内核都在一个大内核地址空间上运行. 1. 简单.2. 高效 ...

  6. 队列Queue:任务间的消息读写,安排起来~

    摘要:本文通过分析鸿蒙轻内核队列模块的源码,掌握队列使用上的差异. 本文分享自华为云社区<鸿蒙轻内核M核源码分析系列十三 消息队列Queue>,作者:zhushy . 队列(Queue)是 ...

  7. 【windwos 操作系统】关键的Windows内核数据结构一览(上)

    文章作者:r00tk1t 发布时间:2018年01月08日 - 21时56分 最后更新:2020年10月20日 - 21时01分 原始链接:https://r00tk1ts.github.io/201 ...

  8. 《IO 系统性能》笔记

    近期项目中涉及和别人谈存储架构及选型,将IOPS相关的内容学习下.参考网上资料<IO 系统性能之一:衡量性能的几个指标> 1. 基本概念 1)读写IO操作:对应磁盘的存数据.取数据: 2) ...

  9. Linux Rootkit Learning

    目录 . 学习Rootkit需要了解的基础知识 . 挂钩(HOOKING) . 直接内核对象操作 . LSM框架(Linux Security Module)于LKM安全 . rootkit检测技术及 ...

随机推荐

  1. Shell脚本笔记(一)一些零碎的基础知识

    一些零碎的基础知识 一.认识Shell脚本 一)相关概念 Shell是一种命令解释器,作用是按次序执行(遇到子脚本,先执行子脚本的命令)用户输入的命令和程序. Shell脚本语言是弱类型语言,与其他脚 ...

  2. 潭州课堂25班:Ph201805201 django 项目 第十九课 文章主页数据库模型,前后台功能实现 (课堂笔记)

    -数据库模型设计 : 文章:新闻表: 字段:图片,标题,摘要,类型,作者,创建时间 标签表 评论表, 轮播图:外键,指向文章的外键表 在 utls 目录下创建 models.py  把其它模型常用的字 ...

  3. [NOIP2018]摆渡车

    Description: 有 n 名同学要乘坐摆渡车从人大附中前往人民大学,第 i位同学在第 t 分钟去 等车.只有一辆摆渡车在工作,但摆渡车容量可以视为无限大.摆渡车从人大附中出发. 把车上的同学送 ...

  4. yii2过滤器(filter)

    一.VerbFilter VerbFilter检查请求动作的HTTP请求方式是否允许执行, 如果不允许,会抛出HTTP 异常 use yii\filters\VerbFilter; public fu ...

  5. __getitem__函数

    主要是为了探究第三行为什么打印出很多提示信息,然后探究了下为什么有第三行这种写法,是因为 这个类中定义了def __getitem__(self, query),这样就可以类似于list那种用法了.但 ...

  6. C/JS_实现冒泡排序

    冒泡排序算法的运作如下:(从后往前) 比较相邻的元素.如果第一个比第二个大,就交换他们两个. 对每一对相邻元素作同样的工作,从开始第一对到结尾的最后一对.在这一点,最后的元素应该会是最大的数. 针对所 ...

  7. JS_高阶函数(map and reduce)

    //高阶函数:一个函数可以接受另一个函数作为参数,这种函数称之为高阶函数. */ function f(x,y,f){ return f(x)+f(y); } var sumAbs=f(-6,4,Ma ...

  8. JS膏集01

    JS膏集01 1.动态页面: 向服务器发送请求,服务器那边没有页面,动态生成后,返回给客户端 由html/css/js组成. js还不是面向对象的语言,是基于对象的语言.js中没有类的概念,js的继承 ...

  9. [原创]Burp Suite web应用程序渗透测试神器

    [原创]Burp Suite web应用程序渗透测试神器 一 Burp Suite介绍 Burp Suite是Web应用程序测试的最佳工具之一,其多种功能可以帮我们执行各种任务.请求的拦截和修改,扫描 ...

  10. html的文字样式、下行线、删除线、上标、下标等实现方式

    先看效果如下: 代码如下: <del>del标签删除线</del><br/> <strike>strike标签删除线</strike>< ...