我的编程空间,编程开发者的网络收藏夹
学习永远不晚

python——GIL锁详解

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

python——GIL锁详解

在这里插入图片描述


文章目录

一、GIL全局解释器锁

GIL锁不是python的特点。而是cpython的特点。
2、在cpython解释器中,GIL是一把互斥锁,用来保证进程中同一个时刻只有一个线程在执行。
3、在没有GIL锁的情况下,有可能多线程在执行一个代码的同时,垃圾回收机制对所执行代码的变量直接进行回收,其他的线程再使用该变量时会导致运行错误。

二、为什么会有GIL锁?

python使用引用计数为主,标记清楚和隔代回收为辅来进行内存管理。所有python脚本中创建的对象,都会配备一个引用计数,来记录有多少个指针来指向它。当对象的引用技术为0时,会自动释放其所占用的内存。

假设有2个python线程同时引用一个数据(a=100,引用计数为1),
2个线程都会去操作该数据,由于多线程对同一个资源的竞争,实际上引用计数为3,
但是由于没有GIL锁,导致引用计数只增加1(引用计数为2)
这造成的后果是,当第1个线程结束时,会把引用计数减少为1;当第2个线程结束时,会把引用计数减少为0;
当下一个线程再次视图访问这个数据时,就无法找到有效的内存了
**
在这里插入图片描述

三、多线程无法利用多核优势?

由于GIL锁的存在,即使是多个线程处理任务,但是最终只有一个线程在工作,那么是不是多线程真的一点用处都没有了呢?

对于需要执行的任务来说,分为两种:计算密集型、IO 密集型

假如一个计算密集型的任务需要10s的执行时间,总共有4个这样的任务

在 4核及以上的情况下:
多进程:需要开启 4 个进程,但是 4 个 CPU 并行,最终只需要消耗 10s 多一点的时间。
多线程:只需要开1 个进程,这个进程开启 4 个线程,开启线程所消耗的资源很少,但是由于最终执行是只有一个 CPU 可以工作,所以最终消耗 40s 多的时间。

假如是多个 IO密集型 的任务
CPU 大多数时间是处于闲置状态,频繁的切换

多进程:进程进行切换需要消耗大量资源
多线程:线程进行切换并不需要消耗大量资源

计算密集型和IO密集型

计算密集型:要进行大量的数值计算,例如进行上亿的数字计算、计算圆周率、对视频进行高清解码等等。这种计算密集型任务虽然也可以用多任务完成,但是花费的主要时间在任务切换的时间,此时CPU执行任务的效率比较低。

IO密集型:涉及到网络请求(time.sleep())、磁盘IO的任务都是IO密集型任务,这类任务的特点是CPU消耗很少,任务的大部分时间都在等待IO操作完成(因为IO的速度远远低于CPU和内存的速度)。对于IO密集型任务,任务越多,CPU效率越高,但也有一个限度。

计算密集型——采用多进程

执行时间为: 4.062887668609619

from multiprocessing import Processimport timedef func1():    sum=0    for i in range(100000000):        sum+=1    print(sum)if __name__ == '__main__':    now=time.time()    l=[]    for i in range(10):        p=Process(target=func1)        p.start()        l.append(p)    for p in l:        p.join()    end=time.time()    print('执行时间为:',end-now)

计算密集型——采用多线程

执行时间为: 27.6159188747406

from threading import Threadimport timedef func1():    sum=0    for i in range(100000000):        sum+=1    print(sum)if __name__ == '__main__':    now=time.time()    l=[]    for i in range(10):        p=Thread(target=func1)        p.start()        l.append(p)    for p in l:        p.join()    end=time.time()    print('执行时间为:',end-now)

IO密集型——采用多进程

执行时间为: 5.388434886932373

from multiprocessing import Processimport timedef func1():    time.sleep(2)if __name__ == '__main__':    now=time.time()    l=[]    for i in range(100):        p=Process(target=func1)        p.start()        l.append(p)    for p in l:        p.join()    end=time.time()    print('执行时间为:',end-now)

IO密集型——采用多线程

执行时间为: 2.0174973011016846

from threading import Threadimport timedef func1():    time.sleep(2)if __name__ == '__main__':    now=time.time()    l=[]    for i in range(100):        p=Thread(target=func1)        p.start()        l.append(p)    for p in l:        p.join()    end=time.time()    print('执行时间为:',end-now)

四、总结

对于IO密集型应用,即便有GIL存在,由于IO操作会导致GIL释放,其他线程能够获得执行权限。由于多线程的通讯成本低于多进程,因此偏向使用多线程。
对于计算密集型应用,由于CPU一直处于被占用状态,GIL锁直到规定时间才会释放,然后才会切换状态,导致多线程处于绝对的劣势,此时可以采用多进程+协程。


来源地址:https://blog.csdn.net/YZL40514131/article/details/127947074

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

python——GIL锁详解

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

python全局解释器GIL锁机制详解

我们要知道一点GIL并不是Python的特性,它是Python解释器Cpython引入的一个概念,下面这篇文章主要给大家介绍了关于python全局解释器GIL锁机制的相关资料,文中通过示例代码介绍的非常详细,需要的朋友可以参考下
2022-12-19

Python中GIL全局解释锁如何实现

今天小编给大家分享一下Python中GIL全局解释锁如何实现的相关知识点,内容详细,逻辑清晰,相信大部分人都还太了解这方面的知识,所以分享这篇文章给大家参考一下,希望大家阅读完这篇文章后有所收获,下面我们一起来了解一下吧。1.为什么有GIL
2023-07-05

如何在Python中获取GIL锁

如何在Python中获取GIL锁?针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。Python主要用来做什么Python主要应用于:1、Web开发;2、数据科学研究;3、网络爬
2023-06-14

python GIL锁的底层原理是什么

本篇内容介绍了“python GIL锁的底层原理是什么”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!释放GIL锁原理分析1、在单核CPU下,
2023-06-30

粉碎 GIL 的枷锁:解锁 Python 并发编程的无限潜力

GIL(全局解释器锁)限制了 Python 的并发性能。本文探索了解锁 GIL 的技术,包括使用多进程、线程和异步编程,从而释放 Python 的并发潜力。
粉碎 GIL 的枷锁:解锁 Python 并发编程的无限潜力
2024-03-01

Python解析器Cpython的GIL锁工作机制是什么

本文小编为大家详细介绍“Python解析器Cpython的GIL锁工作机制是什么”,内容详细,步骤清晰,细节处理妥当,希望这篇“Python解析器Cpython的GIL锁工作机制是什么”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一
2023-07-02

python 中GIL锁的底层原理是什么

这篇文章将为大家详细讲解有关python 中GIL锁的底层原理是什么,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。python可以做什么Python是一种编程语言,内置了许多有效的工具,Py
2023-06-14

Python GIL入门指南:如何理解和使用全局解释器锁

全局解释器锁(GIL)是Python解释器的一个重要概念,它确保了Python解释器一次只能执行一个线程。本文将介绍GIL的工作原理,以及如何理解和使用GIL。
Python GIL入门指南:如何理解和使用全局解释器锁
2024-02-26

Python并发编程中的GIL,理解全局解释器锁对Python并发编程的影响

Python并发编程中的GIL,解读全局解释器锁对Python并发编程的影响 : Python、GIL、并发编程、多线程、性能 Python是一种解释型语言,它的解释器采用单线程模型,即在同一时间只能执行一条指令。为了解决这个问题,Python引入了全局解释器锁(GIL)的概念。GIL是一种同步机制,它确保在同一时间只能有一个线程执行Python字节码。
Python并发编程中的GIL,理解全局解释器锁对Python并发编程的影响
2024-02-05

Python GIL(全局解释器锁):揭秘背后的原理和性能影响

Python GIL(全局解释器锁)是 Python 中影响多线程性能的重要机制。它限制了同一时刻只能有一个线程执行 Python 字节码,从而确保了 Python 解释器的稳定性。这篇将深入探究 GIL 的原理和性能影响,并提供克服 GIL 限制的解决方案。
Python GIL(全局解释器锁):揭秘背后的原理和性能影响
2024-02-26

编程热搜

  • Python 学习之路 - Python
    一、安装Python34Windows在Python官网(https://www.python.org/downloads/)下载安装包并安装。Python的默认安装路径是:C:\Python34配置环境变量:【右键计算机】--》【属性】-
    Python 学习之路 - Python
  • chatgpt的中文全称是什么
    chatgpt的中文全称是生成型预训练变换模型。ChatGPT是什么ChatGPT是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型,它能够通过学习和理解人类的语言来进行对话,还能根据聊天的上下文进行互动,并协助人类完成一系列
    chatgpt的中文全称是什么
  • C/C++中extern函数使用详解
  • C/C++可变参数的使用
    可变参数的使用方法远远不止以下几种,不过在C,C++中使用可变参数时要小心,在使用printf()等函数时传入的参数个数一定不能比前面的格式化字符串中的’%’符号个数少,否则会产生访问越界,运气不好的话还会导致程序崩溃
    C/C++可变参数的使用
  • css样式文件该放在哪里
  • php中数组下标必须是连续的吗
  • Python 3 教程
    Python 3 教程 Python 的 3.0 版本,常被称为 Python 3000,或简称 Py3k。相对于 Python 的早期版本,这是一个较大的升级。为了不带入过多的累赘,Python 3.0 在设计的时候没有考虑向下兼容。 Python
    Python 3 教程
  • Python pip包管理
    一、前言    在Python中, 安装第三方模块是通过 setuptools 这个工具完成的。 Python有两个封装了 setuptools的包管理工具: easy_install  和  pip , 目前官方推荐使用 pip。    
    Python pip包管理
  • ubuntu如何重新编译内核
  • 改善Java代码之慎用java动态编译

目录