python multiprocessing模塊用法及原理介紹
一 multiprocessing模塊介紹
python中的多線程無法利用多核優(yōu)勢,如果想要充分地使用多核CPU的資源(os.cpu\_count\(\)查看),在python中大部分情況需要使用多進程。
Python提供了multiprocessing。 multiprocessing模塊用來開啟子進程,并在子進程中執(zhí)行我們定制的任務(比如函數(shù)),該模塊與多線程模塊threading的編程接口類似。
multiprocessing模塊的功能眾多:支持子進程、通信和共享數(shù)據(jù)、執(zhí)行不同形式的同步,>提供了Process、Queue、Pipe、Lock等組件。
需要再次強調(diào)的一點是:與線程不同,進程沒有任何共享狀態(tài),進程修改的數(shù)據(jù),改動僅限于該進程內(nèi)。
二 Process類的介紹
創(chuàng)建進程的類:
Process([group [, target [, name [, args [, kwargs]]]]]),由該類實例化得到的對象,可用來開啟一個子進程
強調(diào):
1. 需要使用關鍵字的方式來指定參數(shù)
2. args指定的為傳給target函數(shù)的位置參數(shù),是一個元組形式,必須有逗號
參數(shù)介紹:
group參數(shù)未使用,值始終為None
target表示調(diào)用對象,即子進程要執(zhí)行的任務
args表示調(diào)用對象的位置參數(shù)元組,args=(1,2,'mike',)
kwargs表示調(diào)用對象的字典,kwargs={'name':'mike','age':18}
name為子進程的名稱
方法介紹:
p.start()
:# 啟動進程,并調(diào)用該子進程中的p.run()
p.run()
:# 進程啟動時運行的方法,正是它去調(diào)用target指定的函數(shù),我們自定義類的類中一定要實現(xiàn)該方法
p.terminate()
: # 強制終止進程p,不會進行任何清理操作,如果p創(chuàng)建了子進程,該子進程就成了僵尸進程,使用該方法需要特別小心這種情況。如果p還保存了一個鎖那么也將不會被釋放,進而導致死鎖
p.is_alive()
:# 如果p仍然運行,返回True
p.join([timeout])
:# 主進程等待p終止(強調(diào):是主進程處于等的狀態(tài),而p是處于運行的狀態(tài))。timeout是可選的超時時間。
屬性介紹
p.daemon
:默認值為False,如果設為True,代表p為后臺運行的守護進程,當p的父進程終止時,p也隨之終止,并且設定為True后,p不能創(chuàng)建自己的新進程,必須在p.start()之前設置
p.name
:進程的名稱
p.pid
:進程的pid
以上就是本文的全部內(nèi)容,希望對大家的學習有所幫助,也希望大家多多支持腳本之家。
- Python標準庫之多進程(multiprocessing包)介紹
- python multiprocessing 多進程并行計算的操作
- 解決windows下python3使用multiprocessing.Pool出現(xiàn)的問題
- Python多進程multiprocessing、進程池用法實例分析
- Python多進程編程multiprocessing代碼實例
- Python進程Multiprocessing模塊原理解析
- python multiprocessing多進程變量共享與加鎖的實現(xiàn)
- Python進程間通信 multiProcessing Queue隊列實現(xiàn)詳解
- Python Multiprocessing多進程 使用tqdm顯示進度條的實現(xiàn)
- python threading和multiprocessing模塊基本用法實例分析
- Python multiprocessing多進程原理與應用示例
- Python多進程池 multiprocessing Pool用法示例
- Python3多進程 multiprocessing 模塊實例詳解
- Python多進程multiprocessing.Pool類詳解
- Python多線程threading和multiprocessing模塊實例解析
- Python多進程庫multiprocessing中進程池Pool類的使用詳解
- Python利用multiprocessing實現(xiàn)最簡單的分布式作業(yè)調(diào)度系統(tǒng)實例
- 簡單學習Python多進程Multiprocessing
- 像線程一樣管理進程的Python multiprocessing庫
相關文章
記一次pyinstaller打包pygame項目為exe的過程(帶圖片)
這篇文章主要介紹了記一次pyinstaller打包pygame項目為exe的過程,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧2020-03-03