python使用ctypes调用扩展模块的实例方法

作者:古明地盆 时间:2021-11-01 22:22:58 

楔子

我们知道python的执行效率不是很高,而且由于GIL的原因,导致python不能充分利用多核CPU。一般的解决方式是使用多进程,但是多进程开销比较大,而且进程之间的通信也会比较麻烦。因此在解决效率问题上,我们会把那些比较耗时的模块使用C或者C++编写,然后编译成动态链接库,Windows上面是dll,linux上面则是so,编译好之后,交给python去调用。而且通过扩展模块的方式还可以解决python的GIL的问题,因此如果想要利用多核,我们仍然可以通过扩展模块的方式。

python如何调用扩展模块

python调用扩展模块的一种比较简单的方式就是使用ctypes这个库,这个库是python官方提供的,任何一个版本的python都可以使用,我们通过ctypes可以很轻松地调用扩展模块。

演示


#include <stdio.h>

void test()
{
 printf("hello world\n");
}

我们定义了一个很简单的函数,下面我们就可以将其编译成扩展模块了。在Windows是dll,linux上是so,编译的命令是一样的。我这里以Windows 为例,记得在Windows上要安装MinGW,或者安装VsCode,我这里使用的是MinGW,因为VsCode太大了。

gcc -o dll文件或者so文件 -shared c或者c++源文件

我这里的C源文件叫做1.c,我们编译成mmp.dll吧,所以命令就可以这么写:gcc -o mmp.dll -shared 1.c

python使用ctypes调用扩展模块的实例方法

下面就可以使用python去调用了。


import ctypes

# 使用ctypes很简单,直接import进来,然后使用ctypes.CDLL这个类来加载动态模块
# 如果在Windows上还可以使用ctypes.WinDLL。
# 因为看ctypes源码的话,会发现WinDLL也是一个类并且继承自CDLL
# 所以在linux上使用ctypes.CDLL,
# 而在Windows上既可以使用WinDLL、也可以使用CDLL加载动态模块
lib = ctypes.CDLL("./mmp.dll") # 加载之后就得到了扩展模块
# 我们可以直接通过.的方式去调用里面的函数了,会发现成功打印
lib.test() # hello world

# 但是为了确定是否存在这个函数,我们一般会使用反射去获取
# 因为如果函数不存在通过.的方式调用会抛异常的
func = getattr(lib, "test", None)
if func:
 print(func) # <_FuncPtr object at 0x0000029F75F315F0>
 func() # hello world

# 不存在test_xx这个函数,所以得到的结果为None
func1 = getattr(lib, "test_xx", None)
print(func1) # None

所以使用ctypes去调用扩展模块非常方便

1.通过ctypes.CDLL("dll或者so的路径"),如果是Windows还可以使用ctypes.WinDLL("dll路径")。另外这两种加载方式分别等价于:ctypes.CDLL("dll或者so的路径") == ctypes.cdll.LoadLibrary("dll或者so的路径"),ctypes.WinDLL("dll路径") == ctypes.windll.LoadLibrary("dll路径")。但是注意的是:linux上只能使用ctypes.CDLL和ctypes.cdll.LoadLibrary,而Windows上ctypes.CDLL、ctypes.cdll.LoadLibrary、ctypes.WinDLL、ctypes.windll.LoadLibrary都可以使用。但是一般我们都使用ctypes.CDLL即可,另外注意的是:dll或者so文件的路径最好是绝对路径,即便不是也要表明层级,比如我们这里的py文件和dll文件是在同一个目录下,但是我们加载的时候不可以写mmp.dll,这样会报错找不到,要写成./mmp.dll。

2.加载动态模块之后会返回一个对象,我们上面起名为lib,这个lib就是得到的扩展模块了。

3.然后可以直接通过lib调用里面的函数,但是一般我们会使用反射的方式来获取,因为不知道函数到底存不存在,如果不存在直接调用会抛出异常,如果存在这个函数我们才会执行。

来源:https://www.cnblogs.com/traditional/p/12237899.html

标签:python,ctypes,扩展模块
0
投稿

猜你喜欢

  • python读取txt文件并取其某一列数据的示例

    2022-09-25 01:58:09
  • php基于协程实现异步的方法分析

    2023-06-11 10:08:39
  • 一文带你搞懂Python中的文件操作

    2023-07-20 14:00:52
  • Python 中判断列表是否为空的方法

    2023-10-25 13:19:12
  • Django MTV和MVC的区别详解

    2023-06-08 10:15:19
  • css基础教程之序曲

    2008-07-23 12:40:00
  • SQLServer WITH 的用法

    2009-07-09 18:54:00
  • python中的编码和解码及\\x和\\u问题

    2023-11-02 14:46:31
  • 详细整理python 字符串(str)与列表(list)以及数组(array)之间的转换方法

    2022-03-16 09:40:28
  • 汇总数据库备份 还原 压缩与数据库转移的方法

    2009-01-19 14:07:00
  • IE中雅黑字体给布局带来的变化

    2008-06-13 11:22:00
  • Python中print函数简单使用总结

    2022-08-07 19:28:36
  • JavaScript match() 方法

    2007-11-04 13:28:00
  • PHP Document 代码注释规范

    2023-11-14 11:50:54
  • asp最简单的生成验证码代码

    2011-03-07 11:05:00
  • ASP判断E-Mail的合法性,以及过滤邮箱字符

    2010-05-27 12:23:00
  • 一个不错的javascript加密解密算法源码

    2010-03-28 13:12:00
  • Python获取航线信息并且制作成图的讲解

    2023-08-28 18:18:56
  • django 使用 request 获取浏览器发送的参数示例代码

    2023-07-26 15:04:44
  • 网页颜色变黑白CSS代码 适合所有类型网站

    2010-04-21 10:37:00
  • asp之家 网络编程 m.aspxhome.com