go加载python_python培训 | python调用go语言来提速

在写一些对性能要求十分严格的功能的时候,python往往力不从心。毕竟是一个解释性的语言,没有办法和变异性的语言去比较速度和内存占用率。但是python的本身的特定就使得我们可以将耗时的操作移交给编译性的语言去实现。由于项目上的关系,需要对迸发有着比较严格的要求,所以想到了go语言。这里介绍一下如何使用python调用go语言的代码。python调用go语言是通过c语言实现的,可以将go语言打包成so,然后让python通过ctypes加载so文件来实现python调用go语言。这里介绍在linux上实现的方式,在windows上,应该需要改变编译的指令。首先是go方面的代码:main.go文件package mainimport "C"import "fmt"//export Sumfunc Sum(a, b int) int {    return a + b}//export Testfunc Test() int {    var s int   for i := 0; i < 1000000; i++ {       s += i   }    return s}func main() {   fmt.Println(Test())}其中Sum函数上方的//export Sum是必须的,没有这个注释,不会被识别成为导出的对象。export后面的字符是导出后的名字。import "C"也是必须的。

使用如下指令编译:go build -buildmode=c-shared -o sum.so main.gosum.so是编译后的文件,main.go是要编译的文件。

编译完成后,会在当前目录生成sum.so,和sum.h文件。

这里来看一下sum.h文件,下面截取了一段关键的代码:#ifdef __cplusplusextern "C" {#endifextern GoInt Sum(GoInt p0, GoInt p1);extern GoInt Test();#ifdef __cplusplus}#endif可以看到导出了一个Sum函数和一个Test函数,如果不写//export funcname是不会有这个的。

将sum.so和sum.h放到python的目录下面。然后再来编辑test.py文件,这个文件和sum.so同目录下即可。

test.pyfrom ctypes import CDLLimport ctypesif __name__ == "__main__":   test = CDLL("./sum.so").Test   test.restype = ctypes.c_int64   print(test())使用CDLL("./sum.so")加载so模块,然后使用.Test导向Test函数,这里必须和sum.h里一致。test.restype = ctypes.c_int64将Test的函数返回类型声明为int64,在这里的机器上,默认的结果使用的返回类型为int32,会得到一个错误的结果。需要显示的声明为int64。

最后使用test()来调用。运行程序,查看结果。

d80a6cac3e811c55ebd793e20cf8d79c.png

除了上面的定义返回值得类型,还可以定义传入参数的类型,上面的代码中,还定义了一个sum函数。

sum = CDLL("./sum.so").Sum   sum.argtypes = [ctypes.c_int32, ctypes.c_int32]   sum.restype = ctypes.c_int32   print(sum(1, 2))argtypes将接受一个列表类型,里面是各个参数的类型。

来测试一下调用go语言代码的速度,和用python自己写的速度有什么区别。from ctypes import CDLLimport ctypesimport datetimedef speedTest():   sum = 0   for i in range(1000000):       sum += i    return sumif __name__ == "__main__":   test = CDLL("./sum.so").Test   test.restype = ctypes.c_int64   start = datetime.datetime.now()    for i in range(10):       test()   end = datetime.datetime.now()   print(end - start)   start = datetime.datetime.now()    for i in range(10):       speedTest()   end = datetime.datetime.now()   print(end - start)   print("done")go的代码就不放出来了,和python一样,也就用for循环计算累加1000000的值。其实这里的测试不太严谨,但是不影响粗略来看测试的结果。可以发现,两者的速度根本就不是一个数量级的。这还仅仅只是时间上的差距,内存上的差距还没有去看。所以如果对项目的耗时非常严格的话,不妨将其中的耗时操作交给go甚至是c语言去实现,能极大提升性能。

一般来说往函数传递参数的时候,不只是需要传递int值,需要穿钉string值。这个时候问题就来了,传递一个string值会怎么样?//export printStringfunc printString(a string) {   fmt.Println(a)}来看看头文件:#ifdef __cplusplusextern "C" {#endifextern void printString(GoString p0);#ifdef __cplusplus}#endif可以看到函数的参数类型为GoString,这个类型是c语言没有的。往上翻翻能看到GoString的定义:typedef struct { const char *p; ptrdiff_t n; } _GoString_;是一个结构体,有一个char类型的指针和一个代表长度的整数n。

那么在调用这个函数的时候,就需要传递一个GoString的值进去。python侧需要自己来写这个结构体定义。class GoString(ctypes.Structure):   _fields_ = [("p", ctypes.c_char_p), ("n", ctypes.c_longlong)]接下去构建参数传递:msg = GoString(b"hello,world!",len(b"hello,world!"))printString(msg)这里得使用字节流才行,因为是C的char类型指针。最后设置接收类型为定义好的GoString就能调用了。同理,也可以把返回值设置为string,在python里面也可以用这个GoString这个类给读出来。但是直接输出会输出一个内存地址,需要用result.p来输出,这个也是一个字节流。

其他诸如go的map和chan,在导出的时候,都会被标识为void *,读取起来非常麻烦,而slice需要一个结构体来实现。class GoSlice(Structure):    _fields_ = [("data", POINTER(c_void_p)), ("len", c_longlong), ("cap", c_longlong)]最后说一下限制,go语言写的结构体,是没有办法导出的,所以结果的交互要用结构体的时候,尽量用json之类的封装一下。

声明:

由于传播、利用此文所提供的信息而造成的任何直接或者间接的后果及损失,均由使用者本人负责,雷神众测以及文章作者不为此承担任何责任。雷神众测拥有对此文章的修改和解释权。如欲转载或传播此文章,必须保证此文章的完整性,包括版权声明等全部内容。未经雷神众测允许,不得任意修改或者增减此文章内容,不得以任何方式将其用于商业目的。

注释:本文来自公众号雷神众测

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/555852.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Spring Boot框架中使用Jackson的处理总结

1.前言 通常我们在使用Spring Boot框架时&#xff0c;如果没有特别指定接口的序列化类型&#xff0c;则会使用Spring Boot框架默认集成的Jackson框架进行处理&#xff0c;通过Jackson框架将服务端响应的数据序列化成JSON格式的数据。 本文主要针对在Spring Boot框架中使用Jac…

Java hdfs连接池_Java使用连接池管理Hdfs连接

记录一下Java API 连接hadoop操作hdfs的实现流程(使用连接池管理)。以前做过这方面的开发&#xff0c;本来以为不会有什么问题&#xff0c;但是做的还是坑坑巴巴&#xff0c;内心有些懊恼&#xff0c;记录下这烦人的过程&#xff0c;警示自己切莫眼高手低&#xff01;一&#x…

为了拿捏 Redis 数据结构,我画了 40 张图(完整版)

Redis 为什么那么快&#xff1f; 除了它是内存数据库&#xff0c;使得所有的操作都在内存上进行之外&#xff0c;还有一个重要因素&#xff0c;它实现的数据结构&#xff0c;使得我们对数据进行增删查改操作时&#xff0c;Redis 能高效的处理。 因此&#xff0c;这次我们就来…

fastjson为什么默认是无序的

在做项目的时候&#xff0c;无意间发现添加到json中的元素是无存放顺序的。严格来说&#xff0c;json默认是有存放顺序的&#xff0c;不过是采用HashCode值来排序。下面来看一段源码 上图展示了创建json对象的一个过程&#xff0c;可以清晰的看出&#xff0c;无论用户调用哪个…

Java之HashMap.values()转List时的错误和正确操作

因为项目中需要获取到Map的值的集合&#xff0c;所以调用了HashMap.values()方法转成List&#xff0c;当时是使用了以下代码。&#xff08;逻辑上这样想应该没问题&#xff0c;但生活总是会是不是给你一点小“”惊喜“”&#xff09; List<AreaItemOpt> areaItemOpts (…

php检测表大小,查询mysql数据库、表的大小

一、关于mysql表数据大小mysql存储数据文件一般使用表空间存储 &#xff1b;当mysql使用innodb存储引擎的时候&#xff0c;mysql使用表存储数据分为共享表空间和独享表空间两种方式 。共享表空间&#xff1a;Innodb的所有数据保存在一个单独的表空间里面&#xff0c;而这个表空…

springboot使用redis(StringRedisTemplate的常用方法)

1. 先了解RedisTemplate和StringRedisTemplate之间的关系&#xff1a; RedisTemplate是Spring对于Redis的封装&#xff0c;而StringRedisTemplate继承RedisTemplate。两者的数据是不共通的&#xff1b;也就是说StringRedisTemplate只能管理StringRedisTemplate里面的数据&…

Arrays.asList()和Collections.singletonList()比较

Collections.singletonList(something)是不可变的&#xff0c; 对Collections.singletonList(something)返回的列表所做的任何更改将导致UnsupportedOperationException。 Arrays.asList(something)允许Arrays.asList(something) 更改 。 此外&#xff0c;由Collections.sin…

php 邮件类库,[3.3]-扩展类库:基于PHPMailer的邮件发送 | PhalApi(π框架) - PHP轻量级开源接口框架 - 接口,从简单开始!...

3.3.1 扩展类库&#xff1a;基于PHPMailer的邮件发送此扩展可用于发送邮件。3.3.2 安装和配置从 PhalApi-Library 扩展库中下载获取 PHPMailer 包&#xff0c;如使用&#xff1a;$ git clone https://git.oschina.net/dogstar/PhalApi-Library.git然后把 PHPMailer 目录复制到 …

spring boot报FileSizeLimitExceededException异常的解决方法

开发spring boot程序时&#xff0c;遇到了如下错误&#xff1a; The field file exceeds its maximum permitted size of 1048576 bytes. 原因&#xff1a; Spring Boot工程嵌入的tomcat限制了请求的文件大小&#xff0c;官方文档中这样描述&#xff1a; Spring Boot embraces…

前后端分离中的权限管理思路

在传统的前后端不分的开发中&#xff0c;权限管理主要通过过滤器或者拦截器来进行&#xff08;权限管理框架本身也是通过过滤器来实现功能&#xff09;&#xff0c;如果用户不具备某一个角色或者某一个权限&#xff0c;则无法访问某一个页面。 但是在前后端分离中&#xff0c;…

前、后端分离权限控制设计与实现

简述 近几年随着react、angular、vue等前端框架兴起&#xff0c;前后端分离的架构迅速流行。但同时权限控制也带来了问题。 网上很多前、后端分离权限仅仅都仅仅在描述前端权限控制、且是较简单、固定的角色场景&#xff0c;满足不了我们用户、角色都是动态的场景。且仅仅前端…

前后端分离必备的接口规范,十分接地气

1. 前言 随着互联网的高速发展&#xff0c;前端页面的展示、交互体验越来越灵活、炫丽&#xff0c;响应体验也要求越来越高&#xff0c;后端服务的高并发、高可用、高性能、高扩展等特性的要求也愈加苛刻&#xff0c;从而导致前后端研发各自专注于自己擅长的领域深耕细作。 然…

ubuntu php设置,关于ubuntu php环境设置详解-PHP问题

ubuntu php设置办法&#xff1a;起首更新源列表&#xff1b;而后关上“终端窗口”&#xff0c;输出饬令“sudo apt-get install php5”来装置php&#xff1b;接着装置设置装备摆设好apache环境&#xff0c;并装置php5-gd模块&#xff1b;最初创立“info.php”文件便可。Ubuntu …

MyBatis-Plus——增删查改

开发环境 IDEA JDK&#xff1a;1.8 Spring Boot:2.6.2 Maven:3.3.9 MySQL:8.0.23 数据库准备 CREATE DATABASE mybatis_plus_db;DROP TABLE IF EXISTS person; CREATE TABLE person(id BIGINT(20) NOT NULL COMMENT 主键ID, name VARCHAR(30) NULL DEFAULT NULL COMMENT 姓…

让程序员最爽的ThreadLocal使用姿势

一、常见场景 ​ 1、ThreadLocal作为线程上下文副本&#xff0c;那么一种最常见的使用方式就是用来方法隐式传参&#xff0c;通过提供的set()和get()两个public方法来实现在不同的方法中的参数传递。对于编程规范来说&#xff0c;方法定义的时候是对参数个数是有限制的&#x…

一场事故告诉你zookeeper和nacos谁更适合做注册中心

前言 ​ 在分布式系统中&#xff0c;注册中心充当着重要角色&#xff0c;是服务发现、客户端负载均衡中不可缺少的一员。注册中心除了能够实现基本的功能外&#xff0c;他的稳定性、可用性和健壮性对整个分布式系统的流畅运行影响重大。dubbo作为国内一款主流的分布式系统&…

Mysql执行计划含义,mysql执行计划介绍

烂sql不仅直接影响sql的响应时间&#xff0c;更影响db的性能&#xff0c;导致其它正常的sql响应时间变长。如何写好sql&#xff0c;学会看执行计划至关重要。下面我简单讲讲mysql的执行计划&#xff0c;只列出了一些常见的情况&#xff0c;希望对大家有所帮助。测试表结构&…

寄生虫php版,-PHP版SEO最新教材版排名DeDeCms寄生虫V90繁殖

今天视频教程演示说明下PHP寄生虫服务端的使用。主要在很多搭建的过程中会出错&#xff0c;今天主要就讲解下寄生虫配置常见的问题。那么同样也可以看下我们之前的通用版寄生虫使用教程[通用版教程在文件夹中有]&#xff0c;本教程是针对PHP版本的寄生虫服务端进行配置演示。继…

MySQL中 JSON 数据类型应用

前言 今天接触到mysql中json数据类型&#xff0c;之前不知道有这个类型&#xff0c;今天学习一下。 JSON我相信大家都已经很熟悉了&#xff0c;但在 MySQL中&#xff0c;直至 5.7 版本中&#xff0c;才正式引入 JSON数据类型。在次之前&#xff0c;我们通常使varchar或text数…