草庐IT

c++ - 使用boost.python在cygwin中手动构建python扩展

coder 2024-02-25 原文

抱歉,这么笼统的标题,但我不太确定我到底缺少什么或做错了什么。我的目标是使用cygwin下的boost.python构建python扩展,并避免使用boost.build工具而不是boost.build工具。后一种方法为我工作的很好,但是现在我想这样做。我通过谷歌搜索和寻找相似的主题解决了许多问题,这有助于我找出一些技巧并向前迈进。但是在最后一步似乎存在一些问题。我将尝试详细描述我的所有步骤,以希望本文对将来的其他人有所帮助,并更好地描述设置。

因为我不太确定python和boost的原始安装(来自各个cygwin存储库),所以我决定从头开始将其安装在主目录中,所以我要这样做:

  • 首先安装python。我将略过这一点的细节,它或多或少简单明了,后面的描述只是路径:

    /home/Alexey_2/Soft/python2.6-这是PYTHONPATH,也包含在PATH
  • 正在努力提升:

    a)将升压源解压到
    /home/Alexey_2/Soft/boost_1_50_0   - this is BOOST_ROOT
    

    b)制作bjam。首先进入目录:
    /home/Alexey_2/Soft/boost_1_50_0/tools/build/v2 
    

    接下来,调用bootstrap.sh,这将最终在此目录中创建b2和bjam可执行文件。在.bash_profile中,将此目录添加到PATH,因此我们可以调用bjam。在此以及以后对.bash_profile的每次编辑之后,我都重新启动cygwin以进行更改
    产生效果

    c)仍在
    /home/Alexey_2/Soft/boost_1_50_0/tools/build/v2 
    

    目录-编辑user-config.jam,让bjam知道要使用哪个python。所以在我的情况下,我只添加一行:
    using python : 2.6 : /home/Alexey_2/Soft/python2.6/bin/python2.6 : /home/Alexey_2/Soft/python2.6/include/python2.6 : /home/Alexey_2/Soft/python2.6/bin ;
    

    在lib路径(最后一个条目)中,我把/home/Alexey_2/Soft/python2.6/bin放进去,因为它包含libpython2.6.dll

    d)好。现在我们可以制作boost-python库了。转到BOOST_ROOT目录并执行命令
    bjam --with-python toolset=gcc link=shared
    

    这将创建必要的库(cygboost_python.dll和libboost_python.dll.a)并将其放入
    /home/Alexey_2/Soft/boost_1_50_0/stage/lib 
    
  • 构建python扩展。

    这是我的简单测试程序(实际上是示例代码的一部分)
    // file xyz.cpp
    #include <boost/python.hpp>
    #include <iostream>
    #include <iomanip>
    using namespace std;
    using namespace boost::python;
    
    class Hello
    {
      std::string _msg;
    public:
      Hello(std::string msg){_msg = msg;}
      void set(std::string msg) { this->_msg = msg; }
      std::string greet() { return _msg; }
    };
    
    BOOST_PYTHON_MODULE(xyz)
    {
      class_<Hello>("Hello", init<std::string>())
        .def("greet", &Hello::greet)
        .def("set", &Hello::set)
      ;  
    }
    

    这是Makefile:
    FLAGS= -fno-for-scope -O2 -fPIC
    CPP=c++
    
    # BOOST v 1.50.0
    p1=/home/Alexey_2/Soft/boost_1_50_0
    pl1=/home/Alexey_2/Soft/boost_1_50_0/stage/lib
    
    # PYTHON v 2.6
    p2=/home/Alexey_2/Soft/python2.6/include/python2.6
    pl2=/home/Alexey_2/Soft/python2.6/bin
    
    
    I=-I${p1} -I${p2}
    L=-L${pl1} -lboost_python -L${pl2} -lpython2.6
    
    all: xyz.so
    
    xyz.o: xyz.cpp 
        ${CPP} ${FLAGS} ${I} -c xyz.cpp
    
    xyz.so: xyz.o 
        ${CPP} ${FLAGS} -shared -o xyz.so xyz.o ${L}
    
    clean:
        rm *.o
        rm xyz.so
    

  • 一些评论:

    设置了
  • 库路径,并针对适当的库进行编译(请参见compile some code with boost.python by mingw in win7-64bit)。
  • 上面的链接解释了为什么配置user-config.jam很重要-我在步骤1c中做到了。
  • 为了避免可能出现的问题(如上面的链接中所述,以及Cannot link boost.python with mingw(尽管对于mingw),)与boost.python库静态喜欢一样,我使用
    link=shared 
    

    作为bjam的参数(请参见1d)
  • 正如这里所解释的:MinGW + Boost: undefined reference to `WSAStartup@8'应该在对象文件之后列出要用来编译某些内容的库,这就是为什么我们有:
    ${CPP} ${FLAGS} -shared -o xyz.so xyz.o ${L}
    

    并不是
    ${CPP} ${FLAGS} -shared ${L} -o xyz.so xyz.o
    

  • 这是我的.bash_profile(最后)的一部分,我在其中定义环境变量:
    # Python
    export PATH=/home/Alexey_2/Soft/python2.6/bin:$PATH
    export PYTHONPATH=/home/Alexey_2/Soft/python2.6
    export LD_LIBRARY_PATH=/home/Alexey_2/Soft/python2.6/lib:/home/Alexey_2/Soft/python2.6/bin:$LD_LIBRARY_PATH
    
    # Boost
    export BOOST_ROOT=/home/Alexey_2/Soft/boost_1_50_0
    export LD_LIBRARY_PATH=/home/Alexey_2/Soft/boost_1_50_0/stage/lib:$LD_LIBRARY_PATH
    export PATH=/home/Alexey_2/Soft/boost_1_50_0/stage/lib:$PATH
    
    # bjam
    export PATH=/home/Alexey_2/Soft/boost_1_50_0/tools/build/v2:$PATH
    

    最后,解决问题。通过以上设置,我能够成功构建python扩展对象文件:
    xyz.so
    

    但是,当我通过简单的脚本对其进行测试时:
    # this is a test.py script
    import xyz
    

    ImportError来了:
    $ python test.py
    Traceback (most recent call last):
      File "test.py", line 1, in <module>
        import xyz
    ImportError: No module named xyz
    

    已经注意到,出现此类问题的原因可能是使用了错误的python可执行文件,但事实并非如此:
    $ which python
    /home/Alexey_2/Soft/python2.6/bin/python
    

    会发生什么(注意python是从该目录到python2.6的符号链接(symbolic link))

    这是我拥有的另一条有用的信息:
    $ ldd xyz.so
        ntdll.dll => /cygdrive/c/Windows/SysWOW64/ntdll.dll (0x76fa0000)
        kernel32.dll => /cygdrive/c/Windows/syswow64/kernel32.dll (0x76430000)
        KERNELBASE.dll => /cygdrive/c/Windows/syswow64/KERNELBASE.dll (0x748e0000)
        cygboost_python.dll => /home/Alexey_2/Soft/boost_1_50_0/stage/lib/cygboost_python.dll (0x70cc0000)
        cygwin1.dll => /usr/bin/cygwin1.dll (0x61000000)
        cyggcc_s-1.dll => /usr/bin/cyggcc_s-1.dll (0x6ff90000)
        cygstdc++-6.dll => /usr/bin/cygstdc++-6.dll (0x6fa90000)
        libpython2.6.dll => /home/Alexey_2/Soft/python2.6/bin/libpython2.6.dll (0x67ec0000)
        ??? => ??? (0x410000)
    

    我想知道
    ??? => ??? (0x410000)
    

    可能意味着。也许这就是我所缺少的。那是什么
    非常感谢任何意见和建议(不仅关于最后一个问题)。

    编辑:

    根据(twsansbury)建议使用-vv选项检查python模块搜索路径:
    python -vv test.py
    


    # trying /home/Alexey_2/Programming/test/xyz.dll   
    # trying /home/Alexey_2/Programming/test/xyzmodule.dll
    # trying /home/Alexey_2/Programming/test/xyz.py
    # trying /home/Alexey_2/Programming/test/xyz.pyc
    ...
    # trying /home/Alexey_2/Soft/python2.6/lib/python2.6/site-packages/xyz.dll
    # trying /home/Alexey_2/Soft/python2.6/lib/python2.6/site-packages/xyzmodule.dll
    # trying /home/Alexey_2/Soft/python2.6/lib/python2.6/site-packages/xyz.py
    # trying /home/Alexey_2/Soft/python2.6/lib/python2.6/site-packages/xyz.pyc
    Traceback (most recent call last):
      File "test.py", line 1, in <module>
        import xyz
    ImportError: No module named xyz
    

    第一个目录是我从那里调用python来运行脚本的目录。主要结论是cygwin python正在寻找具有标准Windows扩展名-dll(在其他3种类型中)的模块(库),而不是像我最初从cygwin的Linux仿真风格所期望的.so那样。因此,将之前的Makefile中的以下行更改为:
    all: xyz.dll
    
    xyz.o: xyz.cpp 
            ${CPP} ${FLAGS} ${I} -c xyz.cpp
    
    xyz.dll: xyz.o 
        ${CPP} ${FLAGS} -shared -o xyz.dll xyz.o ${L}
    
    clean:
        rm *.o
        rm xyz.dll
    

    生成xyz.dll,可以成功加载:
    python -vv test.py
    

    现在给出:
    Python 2.6.8 (unknown, Mar 21 2013, 17:13:04)
    [GCC 4.5.3] on cygwin
    Type "help", "copyright", "credits" or "license" for more information.
    # trying /home/Alexey_2/Programming/test/xyz.dll
    dlopen("/home/Alexey_2/Programming/test/xyz.dll", 2);
    import xyz # dynamically loaded from /home/Alexey_2/Programming/test/xyz.dll
    

    最佳答案

    ImportError通常与Boost.Python不相关。相反,它通常指示xyz不在Python Module Search Path中。

    要调试此功能,请考虑使用 -vv 参数运行python。这将导致python为尝试导入xyz时检查的每个文件打印一条消息。无论如何,构建过程看起来都是正确的,因此问题可能出在文件扩展名或模块不在搜索路径中。

    我不确定Cygwin将如何与Python的运行时加载行为进行交互。然而:

  • Windows上,python扩展名具有.pyd扩展名。
  • 在Linux上,python扩展具有.so扩展。

  • 此外,请验证xyz库是否位于以下之一:
  • 包含test.py脚本的目录(或当前目录)。
  • 环境变量 PYTHONPATH 中列出的目录。
  • 与安装有关的默认目录。

  • 如果ldd中显示的 Unresolved 库导致错误,则通常会显示为ImportError,并带有一条消息,指出 undefined reference 。

    关于c++ - 使用boost.python在cygwin中手动构建python扩展,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/15571726/

    有关c++ - 使用boost.python在cygwin中手动构建python扩展的更多相关文章

    1. ruby - 如何使用 Nokogiri 的 xpath 和 at_xpath 方法 - 2

      我正在学习如何使用Nokogiri,根据这段代码我遇到了一些问题:require'rubygems'require'mechanize'post_agent=WWW::Mechanize.newpost_page=post_agent.get('http://www.vbulletin.org/forum/showthread.php?t=230708')puts"\nabsolutepathwithtbodygivesnil"putspost_page.parser.xpath('/html/body/div/div/div/div/div/table/tbody/tr/td/div

    2. ruby - 使用 RubyZip 生成 ZIP 文件时设置压缩级别 - 2

      我有一个Ruby程序,它使用rubyzip压缩XML文件的目录树。gem。我的问题是文件开始变得很重,我想提高压缩级别,因为压缩时间不是问题。我在rubyzipdocumentation中找不到一种为创建的ZIP文件指定压缩级别的方法。有人知道如何更改此设置吗?是否有另一个允许指定压缩级别的Ruby库? 最佳答案 这是我通过查看ruby​​zip内部创建的代码。level=Zlib::BEST_COMPRESSIONZip::ZipOutputStream.open(zip_file)do|zip|Dir.glob("**/*")d

    3. ruby - 为什么我可以在 Ruby 中使用 Object#send 访问私有(private)/ protected 方法? - 2

      类classAprivatedeffooputs:fooendpublicdefbarputs:barendprivatedefzimputs:zimendprotecteddefdibputs:dibendendA的实例a=A.new测试a.foorescueputs:faila.barrescueputs:faila.zimrescueputs:faila.dibrescueputs:faila.gazrescueputs:fail测试输出failbarfailfailfail.发送测试[:foo,:bar,:zim,:dib,:gaz].each{|m|a.send(m)resc

    4. ruby-on-rails - 使用 Ruby on Rails 进行自动化测试 - 最佳实践 - 2

      很好奇,就使用ruby​​onrails自动化单元测试而言,你们正在做什么?您是否创建了一个脚本来在cron中运行rake作业并将结果邮寄给您?git中的预提交Hook?只是手动调用?我完全理解测试,但想知道在错误发生之前捕获错误的最佳实践是什么。让我们理所当然地认为测试本身是完美无缺的,并且可以正常工作。下一步是什么以确保他们在正确的时间将可能有害的结果传达给您? 最佳答案 不确定您到底想听什么,但是有几个级别的自动代码库控制:在处理某项功能时,您可以使用类似autotest的内容获得关于哪些有效,哪些无效的即时反馈。要确保您的提

    5. ruby - 在 Ruby 中使用匿名模块 - 2

      假设我做了一个模块如下:m=Module.newdoclassCendend三个问题:除了对m的引用之外,还有什么方法可以访问C和m中的其他内容?我可以在创建匿名模块后为其命名吗(就像我输入“module...”一样)?如何在使用完匿名模块后将其删除,使其定义的常量不再存在? 最佳答案 三个答案:是的,使用ObjectSpace.此代码使c引用你的类(class)C不引用m:c=nilObjectSpace.each_object{|obj|c=objif(Class===objandobj.name=~/::C$/)}当然这取决于

    6. ruby - 使用 ruby​​ 和 savon 的 SOAP 服务 - 2

      我正在尝试使用ruby​​和Savon来使用网络服务。测试服务为http://www.webservicex.net/WS/WSDetails.aspx?WSID=9&CATID=2require'rubygems'require'savon'client=Savon::Client.new"http://www.webservicex.net/stockquote.asmx?WSDL"client.get_quotedo|soap|soap.body={:symbol=>"AAPL"}end返回SOAP异常。检查soap信封,在我看来soap请求没有正确的命名空间。任何人都可以建议我

    7. python - 如何使用 Ruby 或 Python 创建一系列高音调和低音调的蜂鸣声? - 2

      关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。

    8. ruby-on-rails - 'compass watch' 是如何工作的/它是如何与 rails 一起使用的 - 2

      我在我的项目目录中完成了compasscreate.和compassinitrails。几个问题:我已将我的.sass文件放在public/stylesheets中。这是放置它们的正确位置吗?当我运行compasswatch时,它不会自动编译这些.sass文件。我必须手动指定文件:compasswatchpublic/stylesheets/myfile.sass等。如何让它自动运行?文件ie.css、print.css和screen.css已放在stylesheets/compiled。如何在编译后不让它们重新出现的情况下删除它们?我自己编译的.sass文件编译成compiled/t

    9. ruby - 使用 ruby​​ 将 HTML 转换为纯文本并维护结构/格式 - 2

      我想将html转换为纯文本。不过,我不想只删除标签,我想智能地保留尽可能多的格式。为插入换行符标签,检测段落并格式化它们等。输入非常简单,通常是格式良好的html(不是整个文档,只是一堆内容,通常没有anchor或图像)。我可以将几个正则表达式放在一起,让我达到80%,但我认为可能有一些现有的解决方案更智能。 最佳答案 首先,不要尝试为此使用正则表达式。很有可能你会想出一个脆弱/脆弱的解决方案,它会随着HTML的变化而崩溃,或者很难管理和维护。您可以使用Nokogiri快速解析HTML并提取文本:require'nokogiri'h

    10. ruby - 在 64 位 Snow Leopard 上使用 rvm、postgres 9.0、ruby 1.9.2-p136 安装 pg gem 时出现问题 - 2

      我想为Heroku构建一个Rails3应用程序。他们使用Postgres作为他们的数据库,所以我通过MacPorts安装了postgres9.0。现在我需要一个postgresgem并且共识是出于性能原因你想要pggem。但是我对我得到的错误感到非常困惑当我尝试在rvm下通过geminstall安装pg时。我已经非常明确地指定了所有postgres目录的位置可以找到但仍然无法完成安装:$envARCHFLAGS='-archx86_64'geminstallpg--\--with-pg-config=/opt/local/var/db/postgresql90/defaultdb/po

    随机推荐