进程互斥锁

进程间数据不共享,但是共享同一套文件系统,

互斥锁:让并发变成串行,牺牲了执行效率,保证了数据安全

  • 应用:在程序并发执行时,需要修改数据时使用
# data(json文件)
{"target":1}

# 模拟抢票功能.py
import json
import time
from multprocessing import Process
from multprocessing import Lock
# 查看余票
def search(user):
    # 打开json文件查看余票
    with open('data','r',encoding = 'utf-8')as f:
        dic = json.load(f)

    print(f'{user}查看余票:{dic.get("ticket")}')

def buy(user):
    # 先打开车票数据
    with open('data','r',encoding = 'utf-8')as f:
        dic = json.load(f)        

    # 模拟网络延迟
    time.sleep(1)

    # 若有票,修改data数据
    if dic.get("ticket") > 0:
        dic['ticket'] -= 1
        with open('data','w',encoding = 'utf-8')as f:
            json.dump(dic,f)

    print(f'{user}抢票成功')

def run(user,mutex):

    # 并发:异步执行
    search(user)

    # 加锁
    mutex.acquire()
    # 串行:同步执行
    buy(user)
    # 释放锁
    mutex.release()

if __name__ == '__main__':
    mutex = Lock()

    for i in range(10):
        p = Process(target = run,args = (f'用户{i}',))
        p.start()

              

队列和堆栈

  • 队列

    相当于内存中的一个队列空间,可以存放多个数据,遵循“先进先出” (管道+锁)

  • 堆栈

    遵循“先进后出”

from multprocessing import Queue

# 调用队列类实例化队列对象
q = Queue(3) # 参数代表队列中存放的参数数量,默认无限大

# q.put:添加数据,超过数量限制就会卡在哪里
q.put(1)
q.put(2)
q.put(3)
# q.put_nowait:添加数据,超过数量限制报错
q.put_nowait(4)

# q.get:获取的数据遵循“先进先出”,没有即卡住
print(q.get())
print(q.get())
print(q.get())
print(q.get())
# get_nowait:获取数据,队列中没有,则会报错
print(q.get_nowait())

# q.full:判断队列是否满了
print(q.full())

# q.empty:判断队列是否为空
print(q.empty:()) # False

进程间通信(IPC)

进程间数据是相互隔离的,若想实现进程间通信,可以利用队列

from multiprocessing import Process
from multiprocessing import Queue

def test1(q):
    data = '数据hello'
    q.put(data)
    print('进程1开始添加数据到队列中..')

def test2(q):
    data = q.get()

    print(f'进程2从队列中获取数据{data}')

if __name__ == '__main__':
    q = Queue()

    p1 = Process(target=test1, args=(q, ))
    p2 = Process(target=test2, args=(q, ))

    p1.start()
    p2.start()

    print('主')

生产者和消费者模型

通过队列的存储调用作为缓冲来解决

from multiprocessing import Queue, Process
import time

# 生产者
def producer(name, food, q):  # 生产名, 食物, 队列
    for i in range(9):
        data = food, i
        msg = f'用户{name}开始制作{data}'
        print(msg)
        q.put(data)
        time.sleep(0.1)

# 消费者
def consumer(name, q):
    while True:
        data = q.get()
        if not data:
            break
        print(f'用户{name}开始吃{data}')

if __name__ == '__main__':

    q = Queue()

    # 创造生产者
    p1 = Process(target=producer, args=('tank', '油条', q))
    p2 = Process(target=producer, args=('华农兄弟', '竹鼠', q))

    # 生产消费者
    c1 = Process(target=consumer, args=('egon', q))
    c2 = Process(target=consumer, args=('jason', q))

    p1.start()
    p2.start()

    c1.daemon = True
    c2.daemon = True

    c1.start()
    c2.start()

    p2.join()
    print('主')

线程

什么是线程

线程和进程都是虚拟单位,为了更好的描述某种事物

进程:资源单位

线程:执行单位

为什么使用线程

节省内存资源

  • 开启进程

    1. 开辟一个名称空间,每开辟一个进程都会占用一份内存资源
    2. 每个进程会自带一个线程
  • 开启线程
    1. 一个进程可以开启多个线程
    2. 线程的开销远小于进程

注意:线程不能实现并行,线程只能实现并发,进程可以实现并行

怎么开启线程

from threading import Thread
import time

# 开启线程方式1
def task():
    print('thread start')
    time.sleep(1)
    print('thread end')

t = Thread(target = task)
t.start()

# 开启线程方式2
class MyThread(Thread):
    def run(self):
        print('thread start')
        time.sleep(1)
        print('thread end')

t = MyThread()
t.start()

线程对象的属性

  • Thread实例对象的方法

    1. isAlive():返回线程是否存在
    2. getName():返回线程名
    3. setName:设置线程名
  • threading模块提供的方法
    1. currentThread().name:返回线程名
    2. activeCount():返回正在运行的线程数量

线程互斥锁

线程之间数据共享

# 如果不加互斥锁,因为线程并发运行,会导致每个线程同一时间获得的都是100,
from threading import Thread, Lock
import time

mutex = Lock()

n = 100

def task(i):
    print(f'线程{i}启动...')
    global n
    # mutex.acquire()
    temp = n
    time.sleep(0.1)  # 一共等待10秒
    n = temp-1
    print(n)
    # mutex.release()

if __name__ == '__main__':
    t_l=[]
    for i in range(100):
        t = Thread(target=task, args=(i, ))
        t_l.append(t)
        t.start()

    for t in t_l:
        t.join()

    # 100个线程都是在100-1
    print(n)

(day29) 进程互斥锁 + 线程的更多相关文章

  1. 子进程回收资源两种方式,僵尸进程与孤儿进程,守护进程,进程间数据隔离,进程互斥锁,队列,IPC机制,线程,守护线程,线程池,回调函数add_done_callback,TCP服务端实现并发

    子进程回收资源两种方式 - 1) join让主进程等待子进程结束,并回收子进程资源,主进程再结束并回收资源. - 2) 主进程 “正常结束” ,子进程与主进程一并被回收资源. from multipr ...

  2. Java使用FileLock实现Java进程互斥锁

    原理:JDK的nio包中FileLock实现类似Linux fcntl的文件锁, 可使文件被进程互斥访问.  借助此功能, 可以实现强大的Java进程互斥锁, 从而在应用层面保证同一时间只有惟一的Ja ...

  3. Python并发编程03 /僵孤进程,孤儿进程、进程互斥锁,进程队列、进程之间的通信

    Python并发编程03 /僵孤进程,孤儿进程.进程互斥锁,进程队列.进程之间的通信 目录 Python并发编程03 /僵孤进程,孤儿进程.进程互斥锁,进程队列.进程之间的通信 1. 僵尸进程/孤儿进 ...

  4. python 多线程 及多线程通信,互斥锁,线程池

    1.简单的多线程例子 import threading,timedef b_fun(i): print "____________b_fun start" time.sleep(7 ...

  5. 进程(守护进程--互斥锁--IPC机制--生产者模型--僵尸进程与孤儿进程--模拟抢票--消息队列)

    目录 一:进程理论知识 1.理论知识 二:什么是进程? 三:僵尸进程与孤儿进程 1.僵尸进程 四:守护进程 1.什么是守护进程? 2.主进程创建守护进程 3.守护进程 五:互斥锁(模拟多人抢票) 1. ...

  6. 守护进程,互斥锁,IPC,队列,生产者与消费者模型

    小知识点:在子进程中不能使用input输入! 一.守护进程 守护进程表示一个进程b 守护另一个进程a 当被守护的进程结束后,那么守护进程b也跟着结束了 应用场景:之所以开子进程,是为了帮助主进程完成某 ...

  7. 4 并发编程-(进程)-守护进程&互斥锁

    一.守护进程 主进程创建子进程,然后将该进程设置成守护自己的进程,守护进程就好比崇祯皇帝身边的老太监,崇祯皇帝已死老太监就跟着殉葬了. 关于守护进程需要强调两点: 其一:守护进程会在主进程代码执行结束 ...

  8. Python守护进程、进程互斥锁、进程间通信ICP(Queue队列)、生产者消费者模型

    知识点一:守护进程 守护进程:p1.daemon=True 守护进程其实就是一个“子进程“,守护=>伴随 守护进程会伴随主进程的代码运行完毕后而死掉 进程:当父进程需要将一个任务并发出去执行,需 ...

  9. 8.9 day30 并发编程 进程理论 进程方法 守护进程 互斥锁

    多道技术 1.空间上的复用 多个程序共用一套计算机硬件 多道技术原理 2.时间上的复用 ​ 切换+保存状态 ​ 1.当一个程序遇到IO操作 操作系统会剥夺该程序的CPU执行权限( 提高了CPU的利用率 ...

随机推荐

  1. C#连接Mongo报Unable to authenticate using sasl protocol mechanism SCRAM-SHA-1错的解决方案

    ---恢复内容开始--- 最近做一个基于ABP的.net Core的项目,数据库选了MongoDB,但是返现无法给数据库设置认证,只要设置了账号密码连接就报错 连接串如下: mongodb://roo ...

  2. 用Python帮你实现IP子网计算

    目录 0. 前言 1. ipaddress模块介绍 1.1 IP主机地址 1.2 定义网络 1.3 主机接口 1.4 检查address/network/interface对象 1.4.1 检查IP版 ...

  3. 对cpu与load的理解及线上问题处理思路解读

    前言 2019双11还有不到2个月就要到来了,大家也都知道服务器在大促期间由于流量的增加势必导致机器的cpu与load变高.因此趁着这个时机正好再好好学习.巩固一下cpu和load的概念,为双11做准 ...

  4. springboot启动报错 Failed to configure a DataSource: 'url' attribute is not specified and no embedded datasource could be configured.

    新建了一个springboot项目报一下错误: Failed to configure a DataSource: 'url' attribute is not specified and no em ...

  5. Java中的static(1)【持续更新】——关于Eclipse的No enclosing instance of type ... 错误的理解和改正

    No enclosing instance of type SomeClass is accessible. Must qualify the allocation with an enclosing ...

  6. html 试题试卷(包含latex)下载成word - - java

    html 试题试卷(包含latex)下载成word 主要目的: 分享将带latex的html格式的试题试卷以word的格式下载,并且加一些灵活的排版样式 接受群众的检阅,获得反馈 骗取打赏,或者git ...

  7. Mac 安装node npm cnpm vue 以及卸载 node 和 npm 的方法 清空npm缓存的方法

    S01 安装node(内含npm) 首先,到官网下载长期支持版,截止目前,最新的长期支持版本号是10.16.3 https://nodejs.org/zh-cn/download/ 下载完毕后,安装该 ...

  8. [Python] 豆瓣电影top250爬虫

    1.分析 <li><div class="item">电影信息</div></li> 每个电影信息都是同样的格式,毕竟在服务器端是用 ...

  9. Drill 学习笔记之 与Mongo性能测试比较

    性能测试: 竟然用了30秒.... 如果使用mongo 客户端只有1-2秒 感觉Drill是把数据拉过来再进行sql优化,并没有使用Mongo的API,效率低下让人失望...

  10. 基于动态代理的WebAPI/RPC/webSocket框架,一套接口定义,多个通讯方式

    API/RPC/webSocket三个看起来好像没啥相同的地方,在开发时,服务端,客户端实现代码也大不一样 最近整理了一下,通过动态代理的形式,整合了这些开发,都通过统一的接口约束,服务端实现和客户端 ...