python - 如何手动编译使用 C++ 的 Cython 代码？

Question

我完全复制了 Cython documentation for wrapping C++ classes 中给出的示例代码.我可以使用 distutils 和 cythonize() 方法成功构建和导入 rect.so 扩展，即:

1. 将以下指令放在 rect.pyx 的顶部:

   # distutils: language = c++
   # distutils: sources = Rectangle.cpp
   

2. 编写包含以下内容的 setup.py 文件:

   from distutils.core import setup
   from Cython.Build import cythonize
   
   setup(
       name = "rectangleapp",
       ext_modules = cythonize('*.pyx'),
   )
   

3. 打电话

   $ python setup.py build_ext --inplace
   

但是，当我在 Cython 中包装 C 代码时，我经常发现从命令行手动编译单个扩展更方便，即:

1. 使用命令行Cython编译器生成.c代码

   $ cython foo.pyx
   

2. 使用gcc 手动编译它:

   $ gcc -shared -fPIC -O3 -I /usr/lib/python2.7 -L /usr/lib/python2.7 \
          foo.c -lpython2.7 -o foo.so
   

我已经尝试应用相同的过程来构建上面的 rect.so 示例:

$ cython --cplus rect.pyx
$ g++ -shared -fPIC -O3 -I /usr/lib/python2.7 -L /usr/lib/python2.7 \
      rect.cpp -lpython2.7 -o rect.so

Cython 和 g++ 编译步骤似乎都成功了 - 我没有得到任何命令行输出，最后我构建了一个 rect.so。但是，当我随后尝试导入模块时，出现了 undefined symbol 错误:

In [1]: import rect
---------------------------------------------------------------------------
ImportError                               Traceback (most recent call last)
<ipython-input-1-ba16f97c2145> in <module>()
----> 1 import rect

ImportError: ./rect.so: undefined symbol: _ZN6shapes9Rectangle9getLengthEv

手动编译包装 C++ 类的 Cython 代码的正确步骤是什么？

Answer 1

这里的问题是你说你会在某处提供一个名为 Rectangle 的类的定义——示例代码说明了这一点

cdef extern from "Rectangle.h" namespace "shapes":
    cdef cppclass Rectangle:
        ...

但是，当您编译该库时，您没有提供 Rectangle 的代码或包含它的库，因此 rect.so 不知道在哪里可以找到这个 Rectangle 类。

要运行您的代码，您必须首先创建 Rectangle 对象文件。

gcc -c Rectangle.cpp # creates a file called Rectangle.o

现在您可以创建一个库来动态链接，或者将目标文件静态链接到 rect.so。我将首先介绍静态链接，因为它最简单。

gcc -shared -fPIC -I /usr/include/python2.7 rect.cpp Rectangle.o -o rect.so

请注意，我没有包含 python 库。这是因为你希望你的库由 python 解释器加载，因此当你的库被加载时，python 库已经被进程加载了。除了提供 rect.cpp 作为源之外，我还提供了 Rectangle.o。因此，让我们尝试使用您的模块运行一个程序。

运行.py

import rect
print(rect.PyRectangle(0, 0, 1, 2).getLength())

不幸的是，这会产生另一个错误:

ImportError: /home/user/rectangle/rect.so undefined symbol: _ZTINSt8ios_base7failureE

这是因为cython需要c++标准库，而python还没有加载。您可以通过将 C++ 标准库添加到 rect.so

所需的库来解决此问题

gcc -shared -fPIC -I/usr/include/python2.7 rect.cpp Rectangle.o -lstdc++ \
     -o rect.so

再次运行 run.py 一切都应该工作。然而，rect.so 的代码比它需要的要大，尤其是当您生成多个依赖相同代码的库时。您也可以通过将其设为库来动态链接 Rectangle 代码。

gcc -shared -fPIC Rectangle.o -o libRectangle.so
gcc -shared -fPIC -I/usr/include/python2.7 -L. rect.cpp -lRectangle -lstdc++ \
     -o rect.so

我们将 Rectangle 代码编译到当前目录中的共享库中，并提供 -L. 以便 gcc 知道在当前目录中查找库，并提供 -lRectangle 以便gcc 知道要查找 Rectangle 库。最后，为了能够运行您的代码，您必须告诉 python Rectangle 库所在的位置。在运行python之前输入

export LD_LIBRARY_PATH="/home/user/rectangle" # where libRectangle.so lives

您可以使用 shell 脚本来确保每次在运行程序之前都完成此操作，但这会使事情变得更加困惑。最好坚持静态链接矩形。