python多进程模块
由于GIL的存在,python的多线程其实并不是真正的多线程,如果想要充分地使用多核CPU的资源,在python中大部分情况需要使用多进程。
multiprocessing包是python的多进程管理包。与threading.Thread类似,它可以利用multiprocessing.Process对象来创建一个进程。该进程可以运行在python程序内部编写的函数。该Process对象与Thread对象的用法相同,也有start(),run(),join()的方法。此外multiprocessing包中也有Lock/Semaphore/Condition类(这些对象可以像多线程那样,通过参数传递给各个进程),用以同步进程,其用法与threading包中的同类名一致。所以,multiprocessing的很大一部分与threading使用同一套API,只不过换到了多进程的情境。
进程调用:
from multiprocessing import Process
import time
def f(name):
time.sleep(1)
print('hello',name,time.ctime())
if __name__ == '__main__':
p_list = []
for i in range(3):
p = Process(target=f,args=('huang',))
p_list.append(p)
p.start()
for i in p_list:
p.join()
print('over............')
运行结果:
hello huang Wed Aug 22 14:16:33 2018
hello huang Wed Aug 22 14:16:33 2018
hello huang Wed Aug 22 14:16:33 2018
over…………
再看下面代码:
from multiprocessing import Process
import time
import os
def info(title):
print('title:',title)
print('parent process:',os.getppid())
print('process id:',os.getpid())
def f(name):
info('function f')
print('hello',name)
if __name__ == '__main__':
info('main process line')
time.sleep(1)
print('。。。。。。。。。。。')
p = Process(target=info,args=('huang',))
p.start()
p.join()
print('over............')
运行结果:
title: main process line
parent process: 28709
process id: 17153
。。。。。。。。。。。
title: huang
parent process: 17153
process id: 17167
over…………
每个子进程的getppid()得到的id其实就是父进程的id,也就是说每个父进程创建的子进程的ppid都是一样的,都是父进程的id