python的多進程實現的四種方式

1 os.fork()

"""
pid=os.fork()
  1.只用在Unix系統中有效，Windows系統中無效
  2.fork函數調用一次，返回兩次：在父進程中返回值爲子進程id，在子進程中返回值爲0
"""
import os
pid=os.fork()
if pid==0:
  print("執行子進程，子進程pid={pid},父進程ppid={ppid}".format(pid=os.getpid(),ppid=os.getppid()))
else:
  print("執行父進程，子進程pid={pid},父進程ppid={ppid}".format(pid=pid,ppid=os.getpid()))

2 使用multiprocessing模塊: 創建Process的實例，傳入任務執行函數作爲參數

# -*- coding:utf-8 -*-
"""
Process常用屬性與方法：
  name:進程名
  pid：進程id
  run()，自定義子類時覆寫
  start()，開啓進程
  join(timeout=None)，阻塞進程
  terminate(),終止進程
  is_alive()，判斷進程是否存活
"""
import os,time
from multiprocessing import Process
def worker():
  print("子進程執行中>>> pid={0},ppid={1}".format(os.getpid(),os.getppid()))
  time.sleep(2)
  print("子進程終止>>> pid={0}".format(os.getpid()))
def main():
  print("主進程執行中>>> pid={0}".format(os.getpid()))
  ps=[]
  # 創建子進程實例
  for i in range(2):
    p=Process(target=worker,name="worker"+str(i),args=())
    ps.append(p)
  # 開啓進程
  for i in range(2):
    ps[i].start()
  # 阻塞進程
  for i in range(2):
    ps[i].join()
  print("主進程終止")
if __name__ == '__main__':
  main()

3  使用multiprocessing模塊: 派生Process的子類，重寫run方法

import os,time
from multiprocessing import Process
class MyProcess(Process):
  def __init__(self):
    Process.__init__(self)
  def run(self):
    print("子進程開始>>> pid={0},ppid={1}".format(os.getpid(),os.getppid()))
    time.sleep(2)
    print("子進程終止>>> pid={}".format(os.getpid()))
def main():
  print("主進程開始>>> pid={}".format(os.getpid()))
  myp=MyProcess()
  myp.start()
  # myp.join()
  print("主進程終止")
if __name__ == '__main__':
  main()

 

4 使用進程池Pool

 

import os,time
from multiprocessing import Pool
def worker(arg):
  print("子進程開始執行>>> pid={},ppid={},編號{}".format(os.getpid(),os.getppid(),arg))
  time.sleep(0.5)
  print("子進程終止>>> pid={},ppid={},編號{}".format(os.getpid(),os.getppid(),arg))
def main():
  print("主進程開始執行>>> pid={}".format(os.getpid()))
  ps=Pool(5)
  for i in range(10):
    # ps.apply(worker,args=(i,))     # 同步執行
    ps.apply_async(worker,args=(i,)) # 異步執行
  # 關閉進程池，停止接受其它進程
  ps.close()
  # 阻塞進程
  ps.join()
  print("主進程終止")
if __name__ == '__main__':
  main()