python 进程管理

 # 1. 顺序执行任务

for i in range(1000):
    run_proc(i)
耗时: 0:00:00.020522

# 2.1 多进程异步并行执行,进程间没有先后顺序

for i in range(1000):
    p = Process(target=run_proc, args=(i,))
    p.start()
耗时: 0:00:01.877499
# 2.2 多进程同步并行执行,进程间有先后顺序
for i in range(1000):
    p = Process(target=run_proc, args=(i,))
    p.start()
p.join()
耗时: 0:00:01.771093
# 3.1 使用Pool管理多个进程,同步执行
pool = Pool()
start = datetime.now()
for i in range(1000):
    pool.apply(func=run_proc, args=(i,))
pool.close()
pool.join()
耗时: 0:00:00.206646

# 3.2 使用Pool管理多个进程,异步执行

for i in range(1000):
    pool.apply_async(func=run_proc, args=(i,))
pool.close()
pool.join()
耗时: 0:00:00.104507


改为Run 10000次,用pool就快很多了。因为不用pool这些进程回互相抢,反而慢?

 # 1. 顺序执行任务

耗时: 0:00:00.211465
# 2.1 多进程异步并行执行,进程间没有先后顺序
耗时: 0:00:19.826320
# 2.2 多进程同步并行执行,进程间有先后顺序
耗时: 0:00:21.978858
# 3.1 使用Pool管理多个进程,同步执行
耗时: 0:00:02.041180
# 3.2 使用Pool管理多个进程,异步执行
耗时: 0:00:00.947051

Pool vs. 同步、异步 需要再Study!



猜你喜欢

转载自blog.csdn.net/funkidd/article/details/80745995