`
骑猪逛街666
  • 浏览: 142045 次
  • 性别: Icon_minigender_2
  • 来自: 北京
文章分类
社区版块
存档分类
最新评论

Golang调用Python

 
阅读更多

阅读原文请点击

摘要: Python是时髦的机器学习御用开发语言,Golang是大红大紫的新时代后端开发语言。Python很适合让搞算法的写写模型,而Golang很适合提供API服务,两位同志都红的发紫,这里就介绍一下正确搅基的办法。 ![干他一炮.jpg](http://ata2-img.cn-hangzhou.img-pub.aliyun-inc.com/f5ad9d2dbd36c37ef742c7be6998

Python是时髦的机器学习御用开发语言,Golang是大红大紫的新时代后端开发语言。Python很适合让搞算法的写写模型,而Golang很适合提供API服务,两位同志都红的发紫,这里就介绍一下正确搅基的办法。

干他一炮.jpg

原理

Python提供了丰富的C-API。而C和Go又可以通过cgo无缝集成。所以,直接通过Golang调用libpython,就可以实现Go调Python的功能了。确实没啥神奇,只要会用C调Python,马上就知道怎么用了。但问题是,如果有的选择,这个年代还有多少人愿意去裸写C和C++呢?诚心默念Golang大法好。

准备工作

  • Python :确保Python正确安装,所谓正确安装,就是在系统中能找到libpython.so(dylib),找到Python.h。一般linux直接安装python-devel,mac直接用homebrew安装就可以。
  • Golang安装:Golang不需要什么特殊的处理,能找到go即可。

安装libpython-go-binding

虽然直接用cgo调用libpython也不是不可以,但是有native-binding用起来肯定要爽的多。Github上有一个现成的Binding库go-python

 go get github.com/sbinet/go-python

如果Python安装正确,这里会自动编译并显示提示,事就这样成了。

Have a try

首先写一个测试Python脚本

import numpy
import sklearn

a = 10

def b(xixi):
    return xixi + "haha"

然后写一个Go脚本:

package main

import (
    "github.com/sbinet/go-python"
    "fmt"
)

func init() {
    err := python.Initialize()
    if err != nil {
        panic(err.Error())
    }
}

var PyStr = python.PyString_FromString
var GoStr = python.PyString_AS_STRING

func main() {
    // import hello
    InsertBeforeSysPath("/Users/vonng/anaconda2/lib/python2.7/site-packages")
    hello := ImportModule("/Users/vonng/Dev/go/src/gitlab.alibaba-inc.com/cplus", "hello")
    fmt.Printf("[MODULE] repr(hello) = %s\n", GoStr(hello.Repr()))

    // print(hello.a)
    a := hello.GetAttrString("a")
    fmt.Printf("[VARS] a = %#v\n", python.PyInt_AsLong(a))

    // print(hello.b)
    b := hello.GetAttrString("b")
    fmt.Printf("[FUNC] b = %#v\n", b)

    // args = tuple("xixi",)
    bArgs := python.PyTuple_New(1)
    python.PyTuple_SetItem(bArgs, 0, PyStr("xixi"))

    // b(*args)
    res := b.Call(bArgs, python.Py_None)
    fmt.Printf("[CALL] b('xixi') = %s\n", GoStr(res))

    // sklearn
    sklearn := hello.GetAttrString("sklearn")
    skVersion := sklearn.GetAttrString("__version__")
    fmt.Printf("[IMPORT] sklearn = %s\n", GoStr(sklearn.Repr()))
    fmt.Printf("[IMPORT] sklearn version =  %s\n", GoStr(skVersion.Repr()))
}

// InsertBeforeSysPath will add given dir to python import path
func InsertBeforeSysPath(p string) string {
    sysModule := python.PyImport_ImportModule("sys")
    path := sysModule.GetAttrString("path")
    python.PyList_Insert(path, 0, PyStr(p))
    return GoStr(path.Repr())
}

// ImportModule will import python module from given directory
func ImportModule(dir, name string) *python.PyObject {
    sysModule := python.PyImport_ImportModule("sys") // import sys
    path := sysModule.GetAttrString("path")                    // path = sys.path
    python.PyList_Insert(path, 0, PyStr(dir))                     // path.insert(0, dir)
    return python.PyImport_ImportModule(name)            // return __import__(name)
}

打印输出为:

repr(hello) = <module 'hello' from '/Users/vonng/Dev/go/src/gitlab.alibaba-inc.com/cplus/hello.pyc'>
a = 10
b = &python.PyObject{ptr:(*python._Ctype_struct__object)(0xe90b1b8)}
b('xixi') = xixihaha
sklearn = <module 'sklearn' from '/Users/vonng/anaconda2/lib/python2.7/site-packages/sklearn/__init__.pyc'>
sklearn version =  '0.18.1'

这里简单解释一下。首先将这个脚本的路径添加到sys.path中。然后调用PyImport_ImportModule导入包

使用GetAttrString可以根据属性名获取对象的属性,相当于python中的.操作。调用Python函数可以采用Object.Call方法,,列表参数使用Tuple来构建。返回值用PyString_AS_STRING从Python字符串转换为C或Go的字符串。

更多用法可以参考Python-C API文档

但是只要有这几个API,就足够 Make python module rock & roll。充分利用Golang和Python各自的特性,构建灵活而强大的应用了。

阅读原文请点击

分享到:
评论

相关推荐

    Golang如何调用Python代码详解

    go 中的 cgo 模块可以让 go 无缝调用 c 或者 c++ 的代码,而 python 本身就是个 c 库,自然也可以由 cgo 直接调用,前提是指定正确的编译条件,如 Python.h 头文件(),以及要链接的库文件。本文以 Ubuntu 18.04 ...

    golang的调用shell的库go-sh.zip

    go-sh是一个golang的调用shell的库。 使用linux的人都知道shell脚本有它难以取代的优势,用2个词形容就是,简单、粗暴。但是shell有不少的坑,很容易就写的换个机器就不能使了。golang的优势很明显,写出来的代码...

    像python-sh一样,可以轻松地用golang调用shell。-Python开发

    go-sh如果您依赖于旧版api,请参见标记:v.0.1安装:go get github.com/codeskyblue/go-sh管道示例:包main ...这些是其一些功能:保留变量环境(例如export)的别名支持(例如Shell中的别名)记住当前的dir管道命令

    Golang和Python源码学习.zip

    在IT领域,Go语言(Golang)和Python都是广受欢迎的编程语言,它们各自拥有独特的特性和优势。本文将深入探讨这两个语言的核心概念、应用场景以及源码学习的重要性。 首先,让我们了解一下Go语言。Go是由Google设计...

    go和python调用其它程序并得到程序输出

    一、用python调用其它程序,并得到输出 示例代码: 复制代码 代码如下:import osvar = os.popen(‘ls -l’).read()print var 运行效果(以我机器为例): 二、用go语言调用其它程序,并得到输出 go代码: 复制代

    go-torch:Golang的LibTorch(PyTorch)绑定

    库的首要目的是针对从Python版本的PyTorch导出的序列化模型进行推理。 库也可以用于直接从Go编译TorchScript应用程序。 正在安装 $ go get github.com/orktes/go-torch 用法 go-torch取决于LibTorch共享库的可用性...

    详解Golang 与python中的字符串反转

    ### Golang与Python中的字符串反转详解 #### Golang中的字符串反转 在Go语言中,由于其内部使用UTF-8编码存储字符串,因此处理字符串时可能会遇到包含非ASCII字符的情况(如中文字符)。为了确保字符串反转时能...

    Go-使用grpcgo和python的双向流式RPC的快速演示

    9. **客户端调用**:在Go和Python中,都可以通过生成的客户端代码来发起双向流式调用。你需要创建一个客户端连接,然后调用对应的方法,通过流对象发送和接收数据。 10. **并发处理**:在双向流式RPC中,服务端可能...

    go-locust:golang版的分布式压测系统

    go-locust是一个基于Golang语言开发的分布式压力测试系统,灵感来源于Python的Locust库。这个系统的设计目标是为用户提供一种高效、可扩展的解决方案,用于模拟大量用户并发访问服务,以评估和优化系统的负载承受...

    rpcexample:Golang和python中的RPC和JSON RPC服务器和客户端示例

    在Golang和Python之间进行RPC通信时,我们需要注意跨语言兼容性,确保双方使用的序列化和反序列化机制是相同的,例如这里都使用了JSON。此外,为了保证安全,通常还需要考虑认证、授权和数据加密。 该项目...

    gopickle:Go库,用于加载用pickle和PyTorch模块文件序列化的Python数据

    GoPickle GoPickle是一个Go库,用于加载用pickle和PyTorch模块文件序列化的Python数据。 pickle子包提供了核心功能,用于从文件,字符串或字节序列中加载使用Python pickle模块序列化的数据。 支持从0到5的所有...

    天真的go绑定到CPython C-API-Golang开发

    go-python对CPython-2的C-API的朴素go绑定。 该软件包提供了一个名为“ python...该软件包还提供了一个可执行文件“ go-python”,该文件仅加载“ python”,然后调用python.Py_Main(os.Args)。 理性的是,在这样一个

    Go语言调用Shell与可执行文件的实现

    os/exec包可用于调用外部命令,可以使用管道连接输入输出,并支持阻塞与非阻塞方式执行命令。 os/exec包中关键的类型为Cmd,以下介绍的所有方法皆服务于该类型: func Command(name string, arg …string) *Cmd ...

    gosublime_python_golang_

    标题中的“gosublime_python_golang_”暗示了这是一个关于使用Sublime Text编辑器搭建Go语言(Golang)开发环境的教程,同时涉及到Python的相关内容,可能是因为Sublime Text也常用于Python编程。Sublime Text是一款...

    golang读取excel模板批量生成word工具.zip

    - 脚本文件可能是bash、Python或PowerShell等,用于自动化执行一系列操作,如调用Go编译的exe文件,传递参数等。这有助于集成到CI/CD流程中,或者在特定环境中自动化执行任务。 综上所述,这个项目展示了如何利用...

    一言随机语录调用代码Hitokoto

    3. **编程语言选择**:根据压缩包文件名,我们可以推测这个调用代码可能是用Python编写的,因为Python在处理网络请求和JSON数据方面非常方便。当然,其他支持HTTP请求和JSON解析的语言如JavaScript、Java、C#等也...

    Golang工具库.zip

    在IT行业中,Go语言(Golang)以其高效、简洁和并发特性受到了广泛的欢迎,尤其在构建微服务、网络工具和基础设施软件方面表现出色。"Golang工具库.zip"这个压缩包显然包含了各种Golang编写的实用工具库,这些库可以...

    MongoDB_Golang.zip

    提供CURD,事务等基础功能封装,提高开发效率: golang提供了很多的类库下载,但是并不方便直接使用,或者重复使用的方法没有基于业务层的封装,调用极其繁琐反复,笔者在使用时深有感受;故封装了连接池,数据库...

Global site tag (gtag.js) - Google Analytics