python中的 生产者和消费者

什么是生产者消费者模式

在软件开发过程中,经常会遇到这样的情景:
某些模块负责生产数据,这些数据由其他模块来负责处理(此处的模块可能是:函数、线程、进程等)。产生数据的模块称为生产者,而处理数据的模块称为消费者。在生产者与消费者之间的缓冲区称之为仓库。生产者负责往仓库运输商品,而消费者负责从仓库里取出商品,这就构成了生产者消费者模式。

结构图:
在这里插入图片描述
举个栗子:
假如珍妮要寄一封信,大致过程如下
1、珍妮把信写好 —— 相当于生产者生产数据 
2、珍妮把信放入邮箱 —— 相当于生产者把数据放入缓冲区
3、邮递员把信从邮箱取出,做相应处理 —— 相当于消费者把数据取出缓冲区,处理数据

生产者消费者模式优点

1、解耦
假设生产者和消费者分别是两个线程。如果让生产者直接调用消费者的某个方法,那么生产者对于消费者就会产生依赖(也就是耦合)。如果未来消费者的代码发生变化,可能会影响到生产者的代码。而如果两者都依赖于某个缓冲区,两者之间不直接依赖,耦合也就相应降低了。

2、并发
由于生产者与消费者是两个独立的并发体,他们之间是用缓冲区通信的,生产者只需要往缓冲区里丢数据,就可以继续生产下一个数据,而消费者只需要从缓冲区拿数据即可,这样就不会因为彼此的处理速度而发生阻塞。

3、忙闲不均
当生产者制造数据快的时候,消费者来不及处理,未处理的数据可以暂时存在缓冲区中,慢慢处理掉。而不至于因为消费者的性能造成数据丢失或影响生产者生产。

下面用代码实现一下:

代码演示:

from queue import Queue
import threading
import time

#创建队列
q = Queue(10)

def producer(name):
    """生产者"""
    count = 1 # 给生产者的信计数
    while True:
        q.join() #等待task_done()发送信号
        q.put(count)
        print("%s正在写第%d封信"%(name,count))
        count += 1
        time.sleep(0.1)

def customer(name):
    """消费者"""
    count = 1
    while True:
        x = q.get()
        print("%s正在取第%d封信"%(name,x))
        count += 1
        q.task_done() #取完后发送信号
        time.sleep(1)
        
if __name__ == '__main__':
    t1 = threading.Thread(target=producer,args=("珍妮",))
    t2 = threading.Thread(target=customer,args=("邮递员",))
    t1.start()
    t2.start()

运行结果:
在这里插入图片描述

今天就写这里
在这里插入图片描述

发布了49 篇原创文章 · 获赞 5 · 访问量 2005

猜你喜欢

转载自blog.csdn.net/qq_44619595/article/details/104300692
今日推荐