操作系统PV操作之——生产者消费者模型

个人博客主页

参考资料:

Java实现PV操作 | 生产者与消费者

浙大公开课

在操作系统的多进程、多线程操作中经常会有因为同步、互斥等等问题引发出的一系列问题,我们的前辈为了解决这些问题,发明出了“信号量(Semaphore)”这么一个令人称奇的变量,就目前来看,很巧妙的解决了这些问题。

  • 信号量是个整形变量
  • 信号量S只允许两个标准操作wait()和signal(),或者他的发明者称呼的P操作和V操作
  • wait()和signal()是原子操作,不可分割的原语

对PV操作的定义

对PV操作的定义不是单一的,这里举个比较简单的例子

/*P操作*/
wait(S){
value--;
if(value < 0){
/*value的大小表示了允许同时进入临界区进行操作的
进程数量*/
/*add this process to waiting queue*/
block();
}
} /*V操作*/
signal(S){
value++;
if(value <= 0){
/*因为P操作是当value<0时休眠一个线程,说明如果有休眠
的线程,则value一定小于0,所以此时当value+1后,如果
还有休眠的线程,value必定小于或等于0 */
/*remove a process P from the waiting queue*/
wakeup(P);
}
}

信号量的应用

  1. 临界区(互斥)问题,信号量初值需要置为1,表示只能有一个进程进入临界区,从而保护临界区内的数据同时只能被一个进程访问,避免出现多个进程同时操作同一个数据。

    Semaphore S;        //初始值为1
    do{
    wait(S);
    Critical Section; //临界区
    signal(S);
    remainder section //剩余部分
    }while(1);
  2. 两个进程的同步问题。假如有两个进程 Pi和Pj,Pi有个A语句(输入x的值),Pj有个B语句(输出x+1的值),希望在B语句执行之前A语句已经执行完成。

    //同步,定义信号量flag初值为0,等待方用wait操作,被等待方用signal操作,还要紧贴着放
    Pi进程 Pj进程
    ... ...
    A wait(flag)
    signal(flag) B
    ... ...

生产者消费者模型

先定义出PV操作的类

/**
* 封装的PV操作类,为了简单起见,没有用一个等待队列,而是直接用
* Java的Object类方法中的wait方法来模拟
* @author Vfdxvffd
* @count 信号量
* 这里调用wait方法和signal方法的是同一个对象this,所以V操作唤
* 醒的只能是同一个对象P操作加入等待队列的进程
*/
class syn{
int count = 0;
syn(){}
syn(int a){count = a;} //给信号量赋初值 public synchronized void Wait() {
count--;
if(count < 0) { //block
/*add this process to waiting queue*/
try {
wait();
} catch (InterruptedException e) {
e.printStackTrace();
}
}
} public synchronized void Signal() {
count++;
if(count <= 0) { //wakeup
/*remove a process P from the waiting queue*/
notify();
}
}
}

单生产单消费(PV操作解决同步问题)

  1. 先引入全局的信号量,将其封装在一个类中

    class Global{
    static syn empty = new syn(2); //成员变量count表示剩余空闲缓冲区的数量, >0则生产者进程可以执行
    static syn full = new syn(0); //成员变量count表示当前待消费物品的数量, >0则消费者进程可以执行
    static int[] buffer = new int[2]; //缓冲区数组,大小代表缓冲区的数量,即放面包的盘子
    }
  2. 生产者类

    /**
    * 单个生产者类
    * @author Vfdxvffd
    * @count 生产的物品数量标号
    */
    class Producer implements Runnable{
    int count = 0; //数量
    @Override
    public void run() {
    while(count < 20) { //最多生产20件商品
    Global.empty.Wait(); /*要生产物品了,给剩余空
    闲缓冲区数量--,如果减完后变为负数,则说明当前没
    有空闲缓冲区,则加入等待队列*/
    //临界区,生产商品
    int index = count % 2;
    Global.buffer[index] = count;
    System.out.println("生产者在缓冲区"+index+"中生产了物品"+count);
    count++;
    /*可以在此处让进程休眠几秒钟,然后就可能在此时
    CPU将资源调给消费者,但是可以发现由于下面语句还
    未执行,所以消费者拿到CPU执行权也只能消费掉前几
    次生产的商品,这次生产的商品依旧无法被消费*/
    Global.full.Signal();/*发出一个信号,表示缓冲区已
    经有物品了,可以来消费了,成员变量count的值表示缓冲
    区的待消费物品的数量,相当于唤醒消费者*/
    }
    }
    }
  3. 消费者类

    /**
    * 单个消费者类
    * @author Vfdxvffd
    * @count 物品数量标号
    */
    class Consumer implements Runnable{
    int count = 0;
    @Override
    public void run() {
    while(count < 20) {
    Global.full.Wait(); /*要消费物品了,给当前待消费
    物品--,如果减完为负数,则说明当前没有可消费物品,
    加入等待队列*/
    //临界区
    int index = count % 2;
    int value = Global.buffer[index];
    System.out.println("消费者在缓冲区"+index+"中消费了物品"+value);
    count++;
    /*可以在此处让进程休眠几秒钟,然后就可能在此时CPU将
    资源调给生产者,但是可以发现由于下面语句还未执行,
    所以生产者拿到CPU执行权也只能生产在前几次消费的商品
    腾出的缓冲区,这次消费的商品腾出的地方依旧无法被用
    于生产*/
    Global.empty.Signal(); /*消费完一个物品后,释放
    一个缓冲区,给空闲缓冲区数量++,唤醒生产者可以生产
    商品了*/
    }
    }
    }
  4. 主类测试

    public class ConsumeAndProduce{
    public static void main(String[] args) {
    Producer pro = new Producer();
    Consumer con = new Consumer();
    Thread t1 = new Thread(pro);
    Thread t2 = new Thread(con);
    t1.start();
    t2.start();
    }
    }
  5. 总结

​ empty和full两个信号量的作用就在于消费者消费之前检查是否有待消费商品,如果有则让他去消费,没有就要将消费者进程放进等待队列,等到生产者生产了商品后又将其从等待队列中取出。生产者在生产之前需要先检查是否有足够的缓冲区(存放商品的地方),如果有则让其去生产,没有的话就要进入等待队列等待消费者消费缓冲区的商品。

多生产者多消费者(PV操作解决互斥问题)

因为有多个生产者和消费者来生产和消费商品,我们需要在Global中加入两个变量pCount、cCount,分别用来表示生产的商品的序号和被消费的商品的序号,之前是因为只有单个生产消费着,所以直接将其定义在run方法中即可,但这是有多个生产者和消费者,所以要放到一个公共区,一起去操作它。但是如果我们有多个生产者和多个消费者,会不会出现线程安全问题?答案是肯定的。生产者重复生产了同一商品

​ 这种情况如何出现的呢,我们先看run方法里的代码

@Override
public void run() {
while(Global.pCount < 20) { //最多生产20件商品
Global.empty.Wait();
//临界区
int index = Global.pCount % 2;
Global.buffer[index] = Global.pCount;
System.out.println(Thread.currentThread().getName()+"生产者在缓冲区"+index+"中生产了物品"+Global.pCount);
Global.pCount++;
try {
Thread.sleep(10);
} catch (InterruptedException e) {
e.printStackTrace();
}
Global.full.Signal();
}
}

假如生产者1号生产了0号商品,但此时他还没做Global.pCount++这一步操作,CPU将执行权切换到生产者2号,这时Global.pCount的值还是刚刚的0,没有加1,所以又会生产出一个0号商品,那消费者也同理,消费完还没加1,就被切换了执行权。

那就有个问题,如果我们将Global.pCount++这一步提前能不能解决问题呢,当然也是不行的,因为可能++完还没输出就被切换执行权,那下次执行权回来时候就会继续执行输出操作,但此时的Global.pCount的值已经不知道加了多少了。

解决方法

解决的办法就是加入新的信号量Mutex,将初始值设为1,引起多个生产者之间的互斥,或者多个消费者之间的互斥,即1号生产者操作pCount这个数据的时候,其他生产者无法对pCount进行操作。就是我们说的信号量的第一个应用,解决互斥问题。

package OS;

/**
* 封装的PV操作类
* @author Vfdxvffd
* @count 信号量
*/
class syn{
int count = 0;
syn(){}
syn(int a){count = a;} public synchronized void Wait() {
count--;
if(count < 0) { //block
try {
wait();
} catch (InterruptedException e) {
e.printStackTrace();
}
}
} public synchronized void Signal() {
count++;
if(count <= 0) { //wakeup
notify();
}
}
} class Global{
static syn empty = new syn(2); //成员变量count表示剩余空闲缓冲区的数量 >0则生产者进程可以执行
static syn full = new syn(0); //成员变量count表示当前待消费物品的数量 >0则消费者进程可以执行
static syn pMutex = new syn(1); //保证生产者之间互斥的信号量
static syn cMutex = new syn(1); //保证消费者之间互斥的信号量
static int[] buffer = new int[2];//缓冲区,就像放面包的盘子
static int pCount = 0; //生产者生产的商品编号
static int cCount = 0; //消费者消费的商品编号
} /**
* 生产者类
* @author Vfdxvffd
* @count 生产的物品数量标号
* Global.empty.Wait();和Global.pMutex.Wait();的顺序无所谓,
* 只要和下面对应即可,要么都包裹在里面,要么都露在外面
*/
class Producer implements Runnable{
@Override
public void run() {
while(Global.pCount < 20) { //最多生产20件商品
Global.empty.Wait(); /*要生产物品了,给剩余空
闲缓冲区数量--,如果减完后变为负数,则说明当前没有
空闲缓冲区,则加入等待队列*/
Global.pMutex.Wait(); /*保证生产者之间的互斥,
就像是加了一个锁一样this.lock()*/
//临界区
int index = Global.pCount % 2;
Global.buffer[index] = Global.pCount;
System.out.println(Thread.currentThread().getName()+"生产者在缓冲区"+index+"中生产了物品"+Global.pCount);
Global.pCount++;
try {
Thread.sleep(10);
} catch (InterruptedException e) {
e.printStackTrace();
}
Global.pMutex.Signal();//相当于释放锁this.unlock()
Global.full.Signal();/*发出一个信号,表示缓冲区已
经有物品了,可以来消费了,成员变量count的值表示缓冲
区的待消费物品的数量,相当于唤醒消费者*/
}
}
} /**
* 消费者类
* @author Vfdxvffd
* @count 物品数量标号
* Global.full.Wait();和Global.cMutex.Wait();的顺序无所谓,
* 只要和下面对应即可,要么都包裹在里面,要么都露在外面
*/
class Consumer implements Runnable{
@Override
public void run() {
while(Global.cCount < 20) {
Global.full.Wait(); /*要消费物品了,给当前待消费
物品--,如果减完为负数,则说明当前没有可消费物品,
加入等待队列*/
Global.cMutex.Wait();//保证消费者之间的互斥
//临界区
int index = Global.cCount % 2;
int value = Global.buffer[index];
System.out.println(Thread.currentThread().getName()+"消费者在缓冲区"+index+"中消费了物品"+value);
Global.cCount++;
try {
Thread.sleep(10);
} catch (InterruptedException e) {
e.printStackTrace();
}
Global.cMutex.Signal();
Global.empty.Signal(); /*消费完一个物品后,释放
一个缓冲区,给空闲缓冲区数量++*/
}
}
} public class ConsumeAndProduce{
public static void main(String[] args) {
Producer pro = new Producer();
Consumer con = new Consumer();
Thread t1 = new Thread(pro);
Thread t2 = new Thread(con);
Thread t3 = new Thread(pro);
Thread t4 = new Thread(con);
t1.start();
t2.start();
t3.start();
t4.start();
}
}

操作系统实验——PV操作实现生产者消费者模型的更多相关文章

  1. java信号量PV操作 解决生产者-消费者问题

    package test1; /** * 该例子演示生产者和消费者的问题(设只有一个缓存空间.一个消费者和一个生产者) * MySystem类定义了缓冲区个数以及信号量 * @author HYY * ...

  2. 操作系统实验 windows编程多线程 生产者消费者问题 画圆画方(内置bug版)

    实验3:随便写的 #include <windows.h> #include <string> #include <stdio.h> #pragma warning ...

  3. Python3学习之路~9.4 队列、生产者消费者模型

    一 队列queue 当必须在多个线程之间安全地交换信息时,队列在线程编程中特别有用. 队列的作用:1.解耦,使程序直接实现松耦合 2.提高处理效率 列表与队列都是有顺序的,但是他们之间有一个很大的区别 ...

  4. 进程,线程,GIL,Python多线程,生产者消费者模型都是什么鬼

    1. 操作系统基本知识,进程,线程 CPU是计算机的核心,承担了所有的计算任务: 操作系统是计算机的管理者,它负责任务的调度.资源的分配和管理,统领整个计算机硬件:那么操作系统是如何进行任务调度的呢? ...

  5. Java 实现生产者 – 消费者模型

    转自:http://www.importnew.com/27063.html 考查Java的并发编程时,手写“生产者-消费者模型”是一个经典问题.有如下几个考点: 对Java并发模型的理解 对Java ...

  6. 进程同步控制(锁,信号量,事件), 进程通讯(队列和管道,生产者消费者模型) 数据共享(进程池和mutiprocess.Pool模块)

    参考博客 https://www.cnblogs.com/xiao987334176/p/9025072.html#autoid-1-1-0 进程同步(multiprocess.Lock.Semaph ...

  7. python 进程锁 生产者消费者模型 队列 (进程其他方法,守护进程,数据共享,进程隔离验证)

    #######################总结######### 主要理解 锁      生产者消费者模型 解耦用的   队列 共享资源的时候 是不安全的 所以用到后面的锁 守护进程:p.daem ...

  8. python 全栈开发,Day39(进程同步控制(锁,信号量,事件),进程间通信(队列,生产者消费者模型))

    昨日内容回顾 python中启动子进程并发编程并发 :多段程序看起来是同时运行的ftp 网盘不支持并发socketserver 多进程 并发异步 两个进程 分别做不同的事情 创建新进程join :阻塞 ...

  9. C++11 并发指南九(综合运用: C++11 多线程下生产者消费者模型详解)

    前面八章介绍了 C++11 并发编程的基础(抱歉哈,第五章-第八章还在草稿中),本文将综合运用 C++11 中的新的基础设施(主要是多线程.锁.条件变量)来阐述一个经典问题——生产者消费者模型,并给出 ...

随机推荐

  1. 微信小程序 —搜索框

    wxSearch优雅的微信小程序搜索框 一.功能 支持自定义热门key 支持搜索历史 支持搜索建议 支持搜索历史(记录)缓存 二.使用 1.将wxSearch文件夹整个拷贝到根目录下 2.引入 // ...

  2. 详解 Hashtable

    至于HashTable,本人只想说,除了它们各自的特点是截然相反外,其余性质 以及 用法和HashMap的性质几乎一样, (有关Map集合的基本性质,请观看本人博文-- <详解 Map集合> ...

  3. HTML+CSS教程(二)frameset框架和iframe内嵌

    一.框架 (frameset)1.用<frameset></frameset>代替了<body></body>2.rows设置行的占页面的百分比:col ...

  4. golang依赖管理

    目录 使用GOPATH管理依赖 临时GOPATH 依赖查找路径 使用GOVENDER管理依赖 使用GO111MODULE管理依赖 Usage 常用命令列表 不常用命令 使用示例 开启GO111MODU ...

  5. python 基础篇 自定义函数

    多态 我们可以看到,Python 不用考虑输入的数据类型,而是将其交给具体的代码去判断执行,同样的一个函数(比如这边的相加函数 my_sum()),可以同时应用在整型.列表.字符串等等的操作中. 在编 ...

  6. RT-Thread—STM32—在线升级(Ymodem_OTA、HTTP_OTA)

    概述 本教程主要根据官方推荐的教程进行改编,详细信息请参考OTA Downloader软件包STM32 通用 Bootloader 本例程通过自己实际搭建环境,测试总结. bootloader的制作 ...

  7. TensorFlow keras 迁移学习

    数据的读取 import tensorflow as tf from tensorflow.python import keras from tensorflow.python.keras.prepr ...

  8. TensorFlow keras dropout层

    # 建立神经网络模型 model = keras.Sequential([ keras.layers.Flatten(input_shape=(28, 28)), # 将输入数据的形状进行修改成神经网 ...

  9. 理解java容器底层原理--手动实现LinkedList

    Node java 中的 LIinkedList 的数据结构是链表,而链表中每一个元素是节点. 我们先定义一下节点: package com.xzlf.collection; public class ...

  10. windows下部署.netcore+docker系列三 (unbuntu 18.4 下安装ftp)

    // 先更新下系统sudo apt-get update//安装ftpsudo apt-get install vsftpd// 启动 服务sudo service vsftpd start//ftp ...