摘要:為什么使用生產(chǎn)者消費(fèi)者模式在線程世界里,生產(chǎn)者就是生產(chǎn)數(shù)據(jù)的線程,消費(fèi)者就是消費(fèi)數(shù)據(jù)的線程。什么是生產(chǎn)者消費(fèi)者模式生產(chǎn)者消費(fèi)者模式是通過一個(gè)容器來解決生產(chǎn)者和消費(fèi)者的強(qiáng)耦合問題。
在并發(fā)編程中使用生產(chǎn)者和消費(fèi)者模式能夠解決大不多的并發(fā)問題。該模式通過平衡生產(chǎn)線程和消費(fèi)線程的工作能力來提高程序的整體處理數(shù)據(jù)的速度。
在線程世界里,生產(chǎn)者就是生產(chǎn)數(shù)據(jù)的線程,消費(fèi)者就是消費(fèi)數(shù)據(jù)的線程。在多線程開發(fā)中,如果生產(chǎn)者處理速度很快,而消費(fèi)者處理速度很慢,那么生產(chǎn)者就必須等待消費(fèi)者處理完才能繼續(xù)生產(chǎn)數(shù)據(jù)。同樣的道理,如果消費(fèi)者的處理能力大于生產(chǎn)者,那么消費(fèi)者就必須等待生產(chǎn)者。為了解決這個(gè)問題引入了生產(chǎn)者和消費(fèi)者模式。
生產(chǎn)者消費(fèi)者模式是通過一個(gè)容器來解決生產(chǎn)者和消費(fèi)者的強(qiáng)耦合問題。生產(chǎn)者和消費(fèi)者彼此之間不直接通訊,而通過阻塞隊(duì)列來進(jìn)行通訊,所以生產(chǎn)者生產(chǎn)完數(shù)據(jù)之后不用通過等待消費(fèi)者處理,直接扔給阻塞隊(duì)列,消費(fèi)者不著生產(chǎn)者拿數(shù)據(jù),而是直接從阻塞隊(duì)列中取,阻塞隊(duì)列相當(dāng)于一個(gè)緩沖區(qū),平衡了生產(chǎn)者和消費(fèi)者的處理能力。
代碼案例
import threadingimport queueimport time#定義一個(gè)生產(chǎn)者def producer(): count = 0 #判斷隊(duì)列中任務(wù)的數(shù)量 while q.qsize()<5: print("第%s頓飯......",count) q.put(count) count+=1 time.sleep(1)#定義一個(gè)消費(fèi)者def consumer(name): while True: print("%s 吃了第%s飯" % (name,q.get()))#定義一個(gè)隊(duì)列q = queue.Queue(maxsize=4)t1 = threading.Thread(target=producer)t2 = threading.Thread(target=consumer,args=("jibu",))t1.start()t2.start()結(jié)果:第%s頓飯...... 0jibu 吃了第0飯第%s頓飯...... 1jibu 吃了第1飯第%s頓飯...... 2jibu 吃了第2飯第%s頓飯...... 3jibu 吃了第3飯第%s頓飯...... 4jibu 吃了第4飯第%s頓飯...... 5jibu 吃了第5飯第%s頓飯...... 6jibu 吃了第6飯第%s頓飯...... 7jibu 吃了第7飯第%s頓飯...... 8# 另外,如果供大于求或者求大于供,可以在相對小的一方在增加線程的數(shù)量
當(dāng)然如果需要進(jìn)一步優(yōu)化可以讓消費(fèi)者執(zhí)行完隊(duì)列中所有任務(wù)的時(shí)候告訴生產(chǎn)者一聲
import threadingimport queueimport time#定義一個(gè)生產(chǎn)者def producer(): count = 0 #判斷隊(duì)列中任務(wù)的數(shù)量 for i in range(5): print("第%s頓飯......",count) q.put(count) count+=1 time.sleep(1) q.join()#定義一個(gè)消費(fèi)者def consumer(name): while True: print("%s 吃了第%s飯" % (name,q.get())) q.task_done() print("消費(fèi)者執(zhí)行完了所有任務(wù)")#定義一個(gè)隊(duì)列q = queue.Queue(maxsize=4)t1 = threading.Thread(target=producer)t2 = threading.Thread(target=consumer,args=("jibu",))t1.start()t2.start()結(jié)果第0頓飯......jibu 吃了第0飯消費(fèi)者執(zhí)行完了所有任務(wù)第1頓飯......jibu 吃了第1飯消費(fèi)者執(zhí)行完了所有任務(wù)第2頓飯......jibu 吃了第2飯消費(fèi)者執(zhí)行完了所有任務(wù)第3頓飯......jibu 吃了第3飯消費(fèi)者執(zhí)行完了所有任務(wù)第4頓飯......jibu 吃了第4飯消費(fèi)者執(zhí)行完了所有任務(wù)
結(jié)論:
生產(chǎn)者消費(fèi)者的2個(gè)主要作用
1.程序的解耦合
2.程序的異步執(zhí)行,提高了程序的運(yùn)行效率(在排隊(duì)的時(shí)候可以做別的事,過一會可以回來拿這個(gè)結(jié)果)
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://www.ezyhdfw.cn/yun/119307.html
摘要:在生產(chǎn)者與消費(fèi)者之間的緩沖區(qū)稱之為倉庫。生產(chǎn)者負(fù)責(zé)往倉庫運(yùn)輸商品,而消費(fèi)者負(fù)責(zé)從倉庫里取出商品,這就構(gòu)成了生產(chǎn)者消費(fèi)者模式。中的多線程編程在實(shí)現(xiàn)生產(chǎn)者消費(fèi)者模式之前,我們先學(xué)習(xí)下中的多線程編程。 什么是生產(chǎn)者消費(fèi)者模式 在軟件開發(fā)的過程中,經(jīng)常碰到這樣的場景:某些模塊負(fù)責(zé)生產(chǎn)數(shù)據(jù),這些數(shù)據(jù)由其他模塊來負(fù)責(zé)處理(此處的模塊可能是:函數(shù)、線程、進(jìn)程等)。產(chǎn)生數(shù)據(jù)的模塊稱為生產(chǎn)者,而處理數(shù)據(jù)...
摘要:交易所在本教程的前幾部分中,我們發(fā)送消息并從隊(duì)列中接收消息。消費(fèi)者是接收消息的用戶的應(yīng)用程序。中的消息傳遞模型的核心思想是生產(chǎn)者永遠(yuǎn)不會將任何消息直接發(fā)送到隊(duì)列中。交換和隊(duì)列之間的關(guān)系稱為綁定。 源碼:https://github.com/ltoddy/rabbitmq-tutorial 發(fā)布 / 訂閱 (using the Pika Python client) 本章節(jié)教程重點(diǎn)介紹的...
摘要:多進(jìn)程執(zhí)行任務(wù)結(jié)束,創(chuàng)建進(jìn)程和銷毀進(jìn)程是時(shí)間的,如果長度不夠,會造成多線程快過多進(jìn)程多線程執(zhí)行任務(wù)結(jié)束,進(jìn)程間通信生產(chǎn)者消費(fèi)者模型與隊(duì)列演示了生產(chǎn)者和消費(fèi)者的場景。 進(jìn)程 Python是運(yùn)行在解釋器中的語言,查找資料知道,python中有一個(gè)全局鎖(GIL),在使用多進(jìn)程(Thread)的情況下,不能發(fā)揮多核的優(yōu)勢。而使用多進(jìn)程(Multiprocess),則可以發(fā)揮多核的優(yōu)勢真正地提...
閱讀 3132·2023-04-26 00:40
閱讀 2492·2021-09-27 13:47
閱讀 4492·2021-09-07 10:22
閱讀 3027·2021-09-06 15:02
閱讀 3376·2021-09-04 16:45
閱讀 2571·2021-08-11 10:23
閱讀 3664·2021-07-26 23:38
閱讀 2957·2019-08-30 15:54