首页 > 编程语言 >多线程下,C++如何调用Python脚本的方法

多线程下,C++如何调用Python脚本的方法

时间:2023-07-21 17:44:30浏览次数:42  
标签:解释器 调用 Python C++ PyThreadState 线程 多线程

视频教程:多线程场景下,用C++调用Python脚本的方法

Git: https://github.com/JasonLiThirty/C-andPython

接口函数

Python3.6提供给C/C++接口函数,基本都是定义pylifecycle.h,pythonrun.h,ceval.h中。

Py_Initialize() 和 Py_Finalize()

  • C++应用程序调用Python脚本之前,必须先调用Py_Initialize()进行初始化,这个API用来分配Python解释器使用的全局资源,应用程序结束时需要调用Py_Finalize()来关闭Python的使用环境。

Py_IsInitialized()

  • 用来判断Python解释器是否初始化成功,true为成功,false为失败。

PyErr_Print() & PyErr_Clear()

  • 执行Python出错时,PyErr_Print()可将错误信息显示出来,PyErr_Clear()将错误信息在Python解释器的缓存清除。

PyRun_SimpleString()

  • 这个函数能够用来执行简单的Python语句。

PyEval_InitThreads()

  • 如果使用多线程调用Python脚本,就需要在初始化Python解释器时调用PyEval_InitThreads()来启用线程支持(导致Python内部启用线程锁),最好在主线程启动时就调用。该API同时也锁定全局解释锁,所以,还需要在初始化完成后需要自行释放锁。
  • 如果不需要使用多线程,不建议启用该选项,互斥锁也会不可避免的增加系统开销。

PyEval_AcquireLock() & PyEval_ReleaseLock()

  • 因为Python编辑器不是线程安全的,为了支持多线程, Python 使用了互斥使访问内部数据结构串行化。这种互斥即 “全局解释器锁 – global interpreter lock”,当某个线程想使用 Python 的C API的时候,它必须获得全局解释器锁。所以多线程调用Python脚本前必须先持有这个全局解释器锁,然后才能进行对Python的一系列操作。
  • 调用了 PyEval_AcquireLock之后,可以安全地假定你的线程已经持有了锁,其他相关线程不是被阻塞就是在执行与 Python 解析器无关的代码。之后就可以开始执行与Python相关的代码了。
  • 调用了 PyEval_AcquireLock取得了锁之后,必须确保运行完需要的代码后调用 PyEval_ReleaseLock 来释放它,否则就会导致线程死锁并冻结其他 Python 线程。

PyThreadState对象及其相关函数

每个Python 线程都需要维护自己的状态信息,在被Python解释器执行时,需要先切换线程的状态信息,才可以开始执行相应的代码,这个线程状态信息就是用PyThreadState这个对象来描述的。

  • PyThreadState:每个Python 线程维护自己的状态信息,存储在 PyThreadState对象中。在多线程应用中用 C 语言调用 Python API 函数时,你必须维护自己的 PyThreadState 对象以便能安全地执行并发的 Python 代码。
  • PyInterpreterState:描述了几个协作线程共享的状态,属于同一解释器的线程共享它们的模块维护和几个其他的内部子项。
  • PyThreadState_Get():得到当前PyThreadState的指针。一般用在初始化时用来得到主线程的PyThreadState对象。
  • PyThreadState_New():为新的C++线程创建一个 PyThreadState 对象,需要用到既有的 PyInterpreterState 对象。该对象为所有参与的线程所共享的信息,初始化 Python 时,会自动创建一个 PyInterpreterState 对象,附加在主线程的 PyThreadState 对象上, 所以可以利用PyInterpreterState 对象创建新的 PyThreadState。
  • PyThreadState_Swap():将要执行Python代码的线程特定的PyThreadState对象加载到解释器
  • PyThreadState_Clear():重置线程状态对象的所有相关信息。
  • PyThreadState_Delete():销毁一个线程状态对象,该对象的线程状态必须提前调用 PyThreadState_Clear() 进行清除。

以下是几个进阶的接口函数,这些函数可以将全局解释器的加锁和释放锁的操作,以及线程切换的操作封装起来,比较方便。

PyEval_AcquireThread(PyThreadState *tstate)

  • 获得全局解释器锁并将当前线程状态设定为 tstate ,它不能为NULL。锁必须提前创建。如果线程已经拥有锁,会发生死锁。

PyEval_ReleaseThread(PyThreadState *tstate)

  • 重置当前线程状态为NULL并释放全局解释器锁。锁必须提前创建并且以在当前线程中获得。参数 tstate 不能为 NULL。它只能用于校验它描述的当前线程状态——如果它不对,会报告一个致命错误。这个函数在编译时禁用线程支持的情况下不可用。

PyGILState_STATE state = PyGILState_Ensure()

  • 获得全局解释器锁并自动创建一个线程状态,返回值是一个不透明的线程状态“句柄”。

PyGILState_Release(PyGILState_STATE state)

  • 释放全局解释器锁,Python解析器线程状态切换到调用PyGILState_Acquire之前的状态。

PyGILState_Ensure() 和 PyGILState_Release()需要成对出现,仅在CPython中有效,这样就能实现Python解释器的锁功能。只有在关闭Python的使用环境时,可以不再需要调用PyGILState_Release()函数

示例代码

Git: https://github.com/JasonLiThirty/C-andPython

PyInvoker

面向对象的方法实现Python解释器的管理和与Python脚本交互的实现。

PyLock

运用PyGILState_Acqsuire和PyGILState_ReleasePython的Global Interpreter Lock,来实现多线程之间数据完整性和状态同步,GIL机制能保证在任意时刻只有一个线程在解释器中运行,效率上会有一定的损失。

PythonGreet.py

def Hello(): print('Hello world!!!')

PythonCalc.py

def Add(num1, num2): return num1+num2

标签:解释器,调用,Python,C++,PyThreadState,线程,多线程
From: https://www.cnblogs.com/lidabo/p/17572077.html

相关文章

  • (转)GUI为什么不设计为多线程
    在我们这批新人转正评审的时候,我师父问了我的小伙伴一个问题:为什么一些更新界面的方法只能在主线程中调用?师父没有问我这个问题,让知其然但不知其所以然的我有种侥幸逃过一难的心情。我想如果回答那是因为Android GUI库是单线程消息机制的,更新界面的操作必须放到主线程中执行,那师父......
  • iOS 多线程自己的理解
    .创建线程的平均开销:内存堆栈:主线程——1M,子线程——512K时间:基本可以忽略不计a.不可改变的对象,通常是线程安全的b.主线程负责处理响应事件线程安全的类和函数:NSArray,NSData,NSNumber.....非线程安全:NSBundle,NSCoder,NSArchiver......
  • linux 判断主机存活性脚本 python
    Linux主机存活性脚本Python实现在Linux系统中,我们经常需要判断主机的存活性,即确定某个IP地址是否能够正常访问。这对于网络管理员来说是一个非常重要的任务,因为它们可以定期监控主机的可用性,及时发现并解决网络故障。在本文中,我们将介绍如何使用Python编写一个简单的脚本来判断主......
  • movielens数据集分析python
    Movielens数据集分析Python实现概述本文将介绍如何使用Python对Movielens数据集进行分析。Movielens是一个常用的电影评分数据集,包含了用户对电影的评分、电影信息和用户信息等数据。通过对这个数据集的分析,我们可以探索用户对电影的评分情况,了解用户和电影的特征,并进一步进行推......
  • Python3 pyautogui安装成功,但是不能引用
    安装使用的是pycharm,python3.8python-mpipinstallpyautogui-ihttps://pypi.tuna.tsinghua.edu.cn/simple,显示Successfully。 引用importpyautogui报错:Nomodulenamed'pyautogui'解决办法尝试各种网上的方法,查询环境等,不太懂,感觉没有问题偶然发现虽然piplist有......
  • Python Matplotlib绘图笔记(1)
    文章目录1pyplot.figure()语法参数测试figsizefacecoloredgecolorframeon2pyplot.subplot()说明设置所有子图的大标题分别设置每个子图的标题3pyplot.legend()作用设置图例位置设置图例边框设置图例边框颜色设置图例背景颜色设置图例标题4绘制三维图像利用关键字`projection......
  • Python数学建模系列(九):回归
    文章目录前言往期文章1多元回归1.1选取数据1.2构建训练集与测试集,并构建模型1.3模型预测1.4模型评估2logistic回归2.1鸢尾花数据集2.2绘制散点图2.3逻辑回归分析结语前言Hello!小伙伴!非常感谢您阅读海轰的文章,倘若文中有错误的地方,欢迎您指出~ 自我介绍ଘ(੭ˊᵕˋ)੭......
  • Python数学建模系列(六):蒙特卡洛算法
    文章目录前言往期文章1、蒙特卡洛算法样例1样例2样例32、三门问题3、M*M豆问题结语前言Hello!小伙伴!非常感谢您阅读海轰的文章,倘若文中有错误的地方,欢迎您指出~ 自我介绍ଘ(੭ˊᵕˋ)੭昵称:海轰标签:程序猿|C++选手|学生简介:因C语言结识编程,随后转入计算机专业,有幸拿过一些国奖......
  • Python基础day01
    1.编码1.1计算机中所有的数据本质上由0和1来存储。注意:以什么编码保存就以什么编码打开否则会乱码。1.2pycharm运行地址:前面:python解释器地址后面:py文件地址 默认python解释器以'utf-8'编码打开文件。2.输入#将结果呈现给客户,print会在尾部加换行符print("xxx")#en......
  • C++实现公司设备管理系统
    1.1.1设计内容:编写一个简单的实验室设备管理程序,帮助管理实验室设备信息。要求具有设备信息管理的功能。其中包括设备信息的录入、删除、查询和修改等功能。还应包括对实验室信息管理的功能。其中包括对实验室信息的录入、删除、修改和查询等功能。1.2任务和要求运用面向对......