关于python的线程和GIL全局锁的一些见解

版权声明:如果觉得好,转载请附上转载自哪 https://blog.csdn.net/luzhiz/article/details/81633570

GIL全局锁是:Python语言和GIL没有半毛钱关系。仅仅是由于历史原因在Cpython虚拟机(解释器),难以移除GIL.每个线程在执行的过程都需要先获取GIL,保证同一时刻只有一个线程可以执行代码。作用就是保证同一时刻只有一个线程可以执行代码,造成了我们使用多线程的时候无法实现并行.

关于多线程:

在python中,虽然其中有threading模块,也可以进行调用,但创造出来的多线程并不是真正意义上的多线程.

因为就算使用了多线程模式,也不能实现并发的效果,这就是因为有一个全局GIL锁,这个锁的意义就是同一时间内,保证真正执行的线程只有一个,只有进行IO操作阻塞的时候可能引起阻塞的system call之前可以暂时释放GIL,但在执行完毕后,必须重新获取GIL锁.

在使用多线程的时候,多线程爬取比单线程性能有提升,因为遇到IO阻塞会自动释放GIL锁,类似于协程.

结论:

        1. 在 处理像科学计算 这类需要持续使用cpu的任务的时候 单线程会比多线程快
        2. 在 处理像IO操作等可能引起阻塞的这类任务的时候 多线程会比单线程

GIL锁的解决方法:

    1:更换解释器 比如使用jpython(java实现的python解释器),python默认的解释器是Cpython虚拟机.
    2:使用多进程完成多任务的处理

猜你喜欢

转载自blog.csdn.net/luzhiz/article/details/81633570