python编译.so文件

0、背景

Python是一种面向对象的解释型计算机程序设计语言，具有丰富和强大的库，使用其开发产品快速高效。

python的解释特性是将py编译为独有的二进制编码pyc文件，然后对pyc中的指令进行解释执行，但是pyc的反编译却非常简单，可直接反编译为源码，当需要将产品发布到外部环境的时候，源码的保护尤为重要。

基于以上原因，本文将介绍如何将python源码编译pyc，编译成动态链接库.so文件，以及自定义python模块如何打包发布，以便用pip安装自己的python模块。

1、python源码编译至pyc文件

使用python的py_compile模块实现python源码编译pyc。

这里举一个简单的例子：在demo文件夹下有一个demo.py，需要将demo.py编译.pyc。

demo.py内容如下：


def print_hello():print('hello')

在demo文件夹下新建setup.py,内容如下：


import py_compilepy_compile.compile(r'demo.py',r'demo.pyc')

在shell执行：


cd demopython setup.py

在demo文件夹下，就会生成demo.pyc文件。

2、python源码编译.so文件

Python源码编译至.so文件的思路是先将py转换为c代码，然后编译c为so文件。

所需编译环境：

python安装:cython

pip install cython

linux 安装:python-devel,gcc

yum install python-develyum install gcc

同样举上述例子：在demo文件夹下有一个demo.py，需要将demo.py编译.so。

demo.py内容如下：


def print_hello():print('hello')

在demo文件夹下新建setup.py,内容如下：


from distutils.core import setupfrom Cython.Build import cythonizesetup(ext_modules = cythonize(["demo.py"]))

在shell执行：


cd demopython setup.py build_ext

在demo文件夹下，就会生成demo.c文件，同时在demo文件夹下生成build文件夹，在build文件夹下包含生成的.so文件。

3、自定义python模块打包发布

将自定义python模块打包发布有两种，一种是将python源码打包发布，一种是将python源码转换至动态链接库.so文件打包发布。下面介绍一下这两种打包方式。

A)、使用python源码打包

同样使用上述例子：在demo文件夹下有一个demo.py，需要将demo.py打包。

在demo文件夹下新建setup.py,内容如下：

from distutils.core import setupsetup(name = ‘demo’,version = '1.0',py_modules = ['demo'],)

在shell执行：

cd demopython setup.py bdist_wheel

在demo文件夹下，生成dist文件夹，dist文件夹中包含了生成的python模块。

B)、使用python源码编译成.so打包

使用上述例子：在demo文件夹下有一个demo.py，需要将demo.py打包。

首先将python源码转换为c代码：

在demo文件夹下新建generateC.py，内容如下：


from distutils.core import setupfrom Cython.Build import cythonizesetup(ext_modules = cythonize(["demo.py"]))

然后将c代码编译打包，过程如下：

在demo文件夹下新建generateWHL.py，内容如下：


from setuptools import setupfrom setuptools.dist import Distributionfrom distutils.core import Extensionsetup(name = 'demo',version = '1.0',ext_modules = [Extension("demo",['demo.c'])],)

将上述两个文件执行，如下：在demo文件夹下新建setup.py,内容如下：


import oscmd1 = "python generateC.py build_ext"os.system(cmd1)cmd2 = "python generateWHL.py bdist_wheel"os.system(cmd2)

在shell执行：


cd demopython setup.py

在demo文件夹下，生成dist文件夹，dist文件夹中包含了生成的python模块。

C)、安装卸载

可以使用pip直接安装和卸载生成的python模块。

4、其他

本文主要是针对python源码编译打包做了简单介绍，使用了最简单的例子。对于复杂的情况，比如打包时需要额外的数据文件，依赖包等等，需要具体查看setuptools模块的相关内容。