Windows 10 上的 anaconda cythonize C++

Posted 2023-02-23

【中文标题】Windows 10 上的 anaconda cythonize C++

【英文标题】：anaconda cythonize C++ on windows 10

【发布时间】：2018-08-17 21:55:50

【问题描述】：

我的 c++ 代码可以在安装在我的 PC 上的 MSVS 2015 中正常编译。我的任务是使用 cython 制作一个 python 扩展，以便能够从我们的 python 应用程序调用 c++ 函数。我已经安装了带有 cython 的 anaconda 5.2。 c++ 有一堆头文件，编译时需要包含在内。我正在尝试构建一个功能并遇到相同的错误。

对于一个函数，我的 test.pyx 看起来像这样：

cimport test
cimport cython
def pxd_PIXCIclose():
    res = test.pxd_PIXCIclose()
    return res

test.pxd如下：

cdef extern from "D:\epix\inc\xcliball.h":  
int pxd_PIXCIclose()

setup.py 是：

from distutils.core import setup
from distutils.extension import Extension
from Cython.Build import cythonize

ext_modules = Extension(
                name = "test",
                sources=["test.pyx"],
                include_dirs=["D:\epix\lib", "D:\epix\inc"],  
                library_dirs="D:\epix\inc\XCLIBW64.lib","D:\epix\lib\PXIPLW64.lib"]
              )

setup(
  name = "test.pyx",
  ext_modules = cythonize([ext_modules])
)

test.c 已创建，但随后我在 C++ 包含文件夹中的标头上收到一堆构建错误：

python setup.py build_ext --inplace --compiler=msvc

Compiling test.pyx because it depends on .\test.pxd.
[1/1] Cythonizing test.pyx
running build_ext
building 'test' extension

C:\Program Files (x86)\Microsoft Visual Studio 14.0\VC\BIN\x86_amd64\cl.exe 
/c /nologo /Ox /W3 /GL /DNDEBUG /MD -ID:\epix\lib -ID:\epix\inc - 
IC:\Anaconda3\include -IC:\Anaconda3\include "-IC:\Program Files 
(x86)\Microsoft Visual Studio 14.0\VC\INCLUDE" "-IC:\Program Files 
(x86)\Microsoft Visual Studio 14.0\VC\ATLMFC\INCLUDE" "-IC:\Program Files 
(x86)\Windows Kits\10\include\10.0.10586.0\ucrt" "-IC:\Program Files 
(x86)\Windows Kits\NETFXSDK\4.6.1\include\um" "-IC:\Program Files 
(x86)\Windows Kits\10\include\10.0.10586.0\shared" "-IC:\Program Files 
(x86)\Windows Kits\10\include\10.0.10586.0\um" "-IC:\Program Files 
(x86)\Windows Kits\10\include\10.0.10586.0\winrt" /Tctest.c 
/Fobuild\temp.win-amd64-3.6\Release\test.obj
test.c

d:\epix\inc\pxlibsv.h(312): error C2061: syntax error: identifier 'HANDLE'
d:\epix\inc\pxlibsv.h(317): error C2059: syntax error: ''
d:\epix\inc\pxlibsv.h(827): error C2143: syntax error: missing ')' before 
'*'
d:\epix\inc\pxlibsv.h(827): error C2081: 'HANDLE': name in formal parameter 
list illegal
d:\epix\inc\pxlibsv.h(827): error C2143: syntax error: missing ';' before 
'*'
d:\epix\inc\pxlibsv.h(827): error C2059: syntax error: '*'
.
.
.
d:\epix\inc\xclibsc.h(369): fatal error C1003: error count exceeds 100; 
stopping compilation
error: command 'C:\\Program Files (x86)\\Microsoft Visual Studio 
14.0\\VC\\BIN\\x86_amd64\\cl.exe' failed with exit status 2

我猜我的 setup.py 不正确？有人对正在发生的事情有任何指示吗？

更新我原来的帖子，添加#include windows.h，原来的“HANDLE”错误现在消失了，但我现在收到了这个链接错误：

(base) d:\epix\cython>python setup.py build_ext --inplace --compiler=msvc
running build_ext
building 'test' extension
C:\Program Files (x86)\Microsoft Visual Studio 14.0\VC\BIN\x86_amd64\cl.exe 
/c /nologo /Ox /W3 /GL /DNDEBUG /MD -IC:\Anaconda3\include -ID:\epix\lib - 
ID:\epix\inc -IC:\Anaconda3\include -IC:\Anaconda3\include "-IC:\Program 
Files (x86)\Microsoft Visual Studio 14.0\VC\INCLUDE" "-IC:\Program Files 
(x86)\Microsoft Visual Studio 14.0\VC\ATLMFC\INCLUDE" "-IC:\Program Files 
(x86)\Windows Kits\10\include\10.0.10586.0\ucrt" "-IC:\Program Files 
(x86)\Windows Kits\NETFXSDK\4.6.1\include\um" "-IC:\Program Files 
(x86)\Windows Kits\10\include\10.0.10586.0\shared" "-IC:\Program Files 
(x86)\Windows Kits\10\include\10.0.10586.0\um" "-IC:\Program Files 
(x86)\Windows Kits\10\include\10.0.10586.0\winrt" /Tctest.c 
/Fobuild\temp.win-amd64-3.6\Release\test.obj
test.c
C:\Program Files (x86)\Microsoft Visual Studio 
14.0\VC\BIN\x86_amd64\link.exe /nologo /INCREMENTAL:NO /LTCG /DLL 
/MANIFEST:EMBED,ID=2 /MANIFESTUAC:NO /LIBPATH:C:\Anaconda3\Lib 
/LIBPATH:D:\epix\inc\XCLIBW64.lib /LIBPATH:D:\epix\lib\PXIPLW64.lib 
/LIBPATH:C:\Anaconda3\libs /LIBPATH:C:\Anaconda3\PCbuild\amd64 
"/LIBPATH:C:\Program Files (x86)\Microsoft Visual Studio 14.0\VC\LIB\amd64" 
"/LIBPATH:C:\Program Files (x86)\Microsoft Visual Studio 
14.0\VC\ATLMFC\LIB\amd64" "/LIBPATH:C:\Program Files (x86)\Windows 
Kits\10\lib\10.0.10586.0\ucrt\x64" "/LIBPATH:C:\Program Files (x86)\Windows 
Kits\NETFXSDK\4.6.1\lib\um\x64" "/LIBPATH:C:\Program Files (x86)\Windows 
Kits\10\lib\10.0.10586.0\um\x64" /EXPORT:PyInit_test build\temp.win-amd64- 
3.6\Release\test.obj /OUT:d:\epix\cython\test.cp36-win_amd64.pyd 
/IMPLIB:build\temp.win-amd64-3.6\Release\test.cp36-win_amd64.lib
test.obj : warning LNK4197: export 'PyInit_test' specified multiple times; 
using first specification
Creating library build\temp.win-amd64-3.6\Release\test.cp36-win_amd64.lib 
and object build\temp.win-amd64-3.6\Release\test.cp36-win_amd64.exp
test.obj : error LNK2001: unresolved external symbol pxd_PIXCIclose
d:\epix\cython\test.cp36-win_amd64.pyd : fatal error LNK1120: 1 unresolved 
externals error: command 'C:\\Program Files (x86)\\Microsoft Visual Studio 
14.0\\VC\\BIN\\x86_amd64\\link.exe' failed with exit status 1120

有解决此错误的建议吗？谢谢。

【问题讨论】：

HANDLE 的存在让我觉得你的某些东西包括在使用 Windows 标头。它可能只是通过stdafx.h 样式的预编译头设置间接地这样做。在这种情况下，我认为您需要在标题中明确包含该 stdafx.h。

我是将它添加到 setup.py include_dirs 还是将#include 添加到标题中？

我认为您可能必须将其添加到您的标题中，但我实际上并不确定，而且很遗憾，我没有要测试的 Windows 框。

这可能不是你的全部问题，但是：test.pxd 由test.pyx 直接test.pxds 命名空间自动导入。因此，您最终可能会得到多个名为 pxd_PIXCIclose() 的函数（至少从 Cython 的角度来看）。重命名 Cython 函数或 pxd 文件。

嗨 DavidW - 我更改了 pxd 名称，但仍然收到相同的错误。谢谢你的理解。

【参考方案1】：

根据编译器输出，未定义 HANDLE。您知道吗，使用 VS2015 您需要添加 SDK 路径？如我所见，它不包括在内。将 C:\Program Files (x86)\Windows Kits\10\include\platformtoolset\um 添加到路径。 Platformtoolset 将在您的包含路径中定义子文件夹。希望对您有所帮助。

【讨论】：

@sllwine 请看上面

嗨 Valeca，我的系统变量确实将“路径”设置为“C:\Program Files (x86)\Windows Kits\10\Windows Performance Toolkit\”，正如您在我的原始帖子中看到的那样，文件夹 um 包括在内，'"-IC:\Program Files (x86)\Windows Kits\10\include\10.0.10586.0\um"'。谢谢你的建议。

通过将#include 添加到我的头文件中，我能够编译而不会出现原始的“HANDLE”错误。这个洋葱的下一层，我收到以下致命链接错误：d:\cython\test.cp36-win_amd64.pyd : fatal error LNK1120: 1 unresolved externals error: command 'C:\\Program Files (x86) \\Microsoft Visual Studio 14.0\\VC\\BIN\\x86_amd64\\link.exe' 失败，退出状态为 1120。现在我猜我的 setup.py 不包括所需的 .lib 文件，是 'library_dir'不是包含 .lib 的正确方法？谢谢。

@sallwine LNK2001：无法解析的外部符号 pxd_PIXCIclose 表示找不到 pxd_PIXCIclose。虽然这可能很简单，因为添加新的 /LIBPATH 以指向该名称所在的库的位置，但由于几个原因，它也可能很复杂。请看这里：msdn.microsoft.com/en-us/library/f6xx1b1z.aspx 如果您知道库名称，也可以尝试在代码中添加#pragma comment(lib, "library name you need.lib") 指令。

【参考方案2】：

通过将#include windows.h 添加到我的标题中，然后将我原来的 setup.py 更改为以下内容：

from distutils.core import setup
from distutils.extension import Extension
from Cython.Build import cythonize


ext_modules = Extension(
          name = "test",
          sources=["test.pyx"],

          include_dirs=["D:\epix\lib", "D:\epix\inc"],
          library_dirs=["D:\epix\inc"],
          libraries=["XCLIBW64", "PXIPLW64"]

          )

setup(
name = "test.pyx",
ext_modules = cythonize([ext_modules])

我能够成功地对我的 c 项目中的一个函数进行 cythonize。感谢所有给我建议的人，这些建议为我指明了正确的方向。