首页 > 编程语言 >Python3.12 新特性——GIL 重大突破!

Python3.12 新特性——GIL 重大突破!

时间:2023-10-07 18:34:12浏览次数:32  
标签:... Python3.12 Python self 解释器 重大突破 import GIL def

Python3.12 新特性

2023年 10 月 2 日, Python3.12 正式发布了,和之前版本相比,Python3.12 有比较大的更新,核心最主要的就是能够支持解释器之间的隔离了,在一个 Python 进程当中能够有多个解释器,这在一定程度上缓解了 GIL 带来的问题,在这个版本当中主要有下面的一些主要的新特性:

  • 更灵活的 f 字符串解析,允许许多以前不允许的事情 。
  • 支持 Python 代码中的缓冲区协议 。
  • 新的调试/分析 API 。
  • 支持具有单独全局解释器锁的隔离子解释器 。
  • 改进了错误消息。现在,可能由拼写错误引起的更多异常会向用户提出建议。
  • 支持 Linux perf 探查器在跟踪中报告 Python 函数名称。

总体来说整个 Python 的性能提升 5%。

F-String 的新功能

f-string 中的表达式组件现在可以是任何有效的 Python 表达式,包括重用与包含 f 字符串相同的引号的字符串、多行表达式、注释、反斜杠和 unicode 转义序列。

在以前的版版当中会出现下面的语法错误:

>>> songs = ['Take me back to Eden', 'Alkaline', 'Ascensionism']
>>> f"This is the playlist: {", ".join(songs)}"
  File "<stdin>", line 1
SyntaxError: f-string: expecting '}'

上面的操作在新版本当中是可以执行的。

因为现在 f-string 可以支持任何有效的 Python 表达式,因此我们还可以调用函数并且进行操作了:

>>> def hello():
...     return "Hello World"
...
>>> f"hell() return {":" + hello()}"
'hell() return :Hello World'
>>>

由于现在 f 字符串可以在表达式组件中包含任何有效的 Python 表达式,现在可以任意嵌套 f 字符串:

>>> f"{f"{f"{f"{f"{f"{[i for i in range(10)]}"}"}"}"}"}"
'[0, 1, 2, 3, 4, 5, 6, 7, 8, 9]'

更精确的错误消息提示

当你的代码出现 NameError 的时候,标准库的模块可能被作为错误消息的一部分用于提示:

Python 3.12.0 (main, Oct  7 2023, 00:19:52) [Clang 14.0.3 (clang-1403.0.22.14.1)] on darwin
Type "help", "copyright", "credits" or "license" for more information.
>>> sys.version_info
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
NameError: name 'sys' is not defined. Did you forget to import 'sys'?

当你在类当中使用属性的时候发生 NameError 的时候,也会有更加友好的提示:

>>> class A:
...   def __init__(self):
...       self.blech = 1
...
...   def foo(self):
...       somethin = blech

>>> A().foo()
Traceback (most recent call last):
  File "<stdin>", line 1
    somethin = blech
               ^^^^^
NameError: name 'blech' is not defined. Did you mean: 'self.blech'?

包导入错误也可以有帮助提示:

>>> import a.y.z from b.y.z
Traceback (most recent call last):
  File "<stdin>", line 1
    import a.y.z from b.y.z
    ^^^^^^^^^^^^^^^^^^^^^^^
SyntaxError: Did you mean to use 'from ... import ...' instead?

如果你在程序当中使用 from ... import ... 的语法的时候,如果报错了现在也会有更好的提示信息了:

>>> from collections import chainmap
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
ImportError: cannot import name 'chainmap' from 'collections'. Did you mean: 'ChainMap'?

新类型语法

为了更好的支持泛型操作,PEP 695 引入了一种新的、更紧凑的、更显式的方式来创建泛型类和函数:

def max[T](args: Iterable[T]) -> T:
    ...

class list[T]:
    def __getitem__(self, index: int, /) -> T:
        ...

    def append(self, element: T) -> None:
        ...

从上面的代码来看,这种语法形式已经越来越接近 C++/Java 的泛型语法了。这种语法也可以让 type checker 能够进行更好的类型推断了,在一些大型项目当中可以有更好的跳转提示。

此外,还引入了一种使用该语句声明类型别名的新方法,该 type 语句创建 的 TypeAliasType 实例:

type Point = tuple[float, float]
type Point[T] = tuple[T, T]

在新版当中 typing 模块还引入了 override:

模块中添加 typing 了一个新的装饰器 typing.override() 。它向类型检查器指示该方法旨在重写超类中的方法。这允许类型检查器捕获错误,其中旨在重写基类中某些内容的方法实际上没有这样做。

from typing import override

class Base:
  def get_color(self) -> str:
    return "blue"

class GoodChild(Base):
  @override  # ok: overrides Base.get_color
  def get_color(self) -> str:
    return "yellow"

class BadChild(Base):
  @override  # type checker error: does not override Base.get_color
  def get_colour(self) -> str:
    return "red"

每个解释器一个 GIL

在 3.12 版本当中可以创建子解释器,可以为每个子解释器单独创建一个 GIL,这样就可以让 Python 充分利用多核的性能。目前在 CPython3.12 当中只能够通过 C 扩展 API 创建,在 Python 层面当中还不能够使用,预计在 CPython3.13 当中能够直接在 Python 层面进行调用。

执行代码片段:

interp = interpreters.create()
print('before')
interp.run('print("during")')
print('after')

在一个线程里面创建子解释器执行多线程代码:

interp = interpreters.create()
def run():
    interp.run('print("during")')
t = threading.Thread(target=run)
print('before')
t.start()
t.join()
print('after')

Python3.12 在字节码和标准库等方面也有其他的优化,更多的细节可以参考官方发布的文档 传送门


本篇文章是深入理解 python 虚拟机系列文章之一,文章地址:https://github.com/Chang-LeHung/dive-into-cpython

更多精彩内容合集可访问项目:https://github.com/Chang-LeHung/CSCore

关注公众号:一无是处的研究僧,了解更多计算机(Java、Python、计算机系统基础、算法与数据结构)知识。

标签:...,Python3.12,Python,self,解释器,重大突破,import,GIL,def
From: https://www.cnblogs.com/Chang-LeHung/p/17747159.html

相关文章

  • .net core(微服务学习)-使用 AgileConfig轻量配置中心
    由于之前项目维护的时候有多个API服务,发布时候又做了高可用多主机均衡负载,环境又有多套,当部署新代码的时候如果有新增配置项需要修改N个环境和服务器实属折磨人    我们知道每个.netcore中都有一个appsettings.json的配置文件,由于之前项目有3个环境,一共有4台主机,每个主......
  • xilinx赛灵思下载器jtag-hs3兼容alinx仿真fpga烧录digilent高速常见问题解答
    1.概述  XJTAG-HS3是XILINX的USB转JTAG的高速仿真器,可以下载、烧录和仿真Xilinx FPGA和CPLD芯片,以及配置PROM、FLASH. XJTAG-HS3比PlatformCableUSBII下载器快10倍速度。 可以在30Mbit/秒下驱动JTAG/SPI总线,并且能实现对XilinxZYNQ平台处理器核的重置。可以支持ZYN......
  • AgileConfig-1.7.0 发布,支持 SSO
    AgileConfig已经好久好久没有更新过比较大的功能了。一是AgileConfig本身的定位就是比较轻量,不想集成太多的功能。二是比较忙(懒)。但是本次升级给大家带来了一个比较有用的功能SSO。SSO嘛大家都懂,单点登录,稍微上点规模的公司内部都会有统一的单点登录服务。目前SSO主流协......
  • 为什么会有 GIL?如何释放 GIL 实现并行?
    https://mp.weixin.qq.com/s?__biz=Mzg3NTczMDU2Mg==&mid=2247503319&idx=1&sn=7dd1c7c05ccb319501eb0457a1f4c9b7&chksm=cf3f8e3af848072c0ef585787bf2b4359f3d63e43a927f93eaef81c407efff73233ffc00a2c7&scene=178&cur_album_id=251396376434648678......
  • 并发和GIL
    并发和GIL参考博客:Python的多进程和多线程Python中协程、多线程、多进程、GIL锁基于线程的并行基于进程的并行基础知识并发当有多个线程在操作时,如果系统只有一个CPU,则它根本不可能真正同时进行一个以上的线程,它只能把CPU运行时间划分成若干个时间段,再将时间段分配......
  • 2023牛客暑期多校训练营7 CGILM
    比赛链接C题解知识点:位运算,贪心。我们用分段的思想考虑大小关系,若在同一段则大小不能确定,一开始为\([1,n]\)。我们按位从高到低考虑,某位如果\(b_i\)产生了\(1\),那么会这一位的第\(i\)个数产生大小的分段,得到\([1,i-1]<[i,n]\),之后这两段的大小关系就确定了,我们可以......
  • GIL 锁或将在 CPython 中成为可选项
    哈喽大家好,我是咸鱼几天前有媒体报道称,经过多次辩论,Python指导委员会打算批准通过PEP703提案,让GIL(全局解释器)锁在CPython中成为一个可选项PEP703提案主要目标是使GIL变成可选项,即允许Python解释器在特定情况下不使用GIL这将允许Python在多核处理器上更好地利用......
  • PEP 703作者给出的一种no-GIL的实现——python3.9的nogil版本
    PEP703的内容是什么,意义又是什么呢?可以说python的官方接受的no-GIL提议的PEP就是PEP703给出的,如果GIL帧的从python中移除那么可以说对整个python生态圈将有着跨越性发展的意义。  ====================================================  PEP703地址:https://peps.python.org......
  • 为什么有了gil锁还要互斥锁,进程,线程和协程 ,什么是鸭子类型
    1为什么有了gil锁还要互斥锁-gil锁,全局解释器锁,线程需要运行需要得到gil锁,gil锁不能控制用户级别的安全-#互斥锁,为了保证多线程并发操作数据而设置的锁,保证在加锁和释放锁之间,其他线程不能操作,让并行变成串行,牺牲效率-起两个线程。执行任务,x=x+1,x开始等于0-1第一个线程过来......
  • PEP 703作者给出的一种no-GIL的实现——python3.9的nogil版本
    PEP703的内容是什么,意义又是什么呢?可以说python的官方接受的no-GIL提议的PEP就是PEP703给出的,如果GIL帧的从python中移除那么可以说对整个python生态圈将有着跨越性发展的意义。  ====================================================  PEP703地址:https://peps.p......