python 爬虫多线程/多进程

from multiprocessing.dummy import Pool

def get_info(url):
    pass
urls = ['1','2'] #列表生成式
pool = Pool(processes=6) #线程数
pool.map(get_info, urls) #函数名,迭代urls

参考资料:

网易云课堂: 课程图片 看文档学爬虫(python3.6)

知乎: 为什么有人说 Python 的多线程是鸡肋呢?

博客:python 进程、线程

猜你喜欢

转载自blog.csdn.net/qq_18525247/article/details/80291606