我可以使用Cython覆盖Python中的C ++虚函数吗?

时间:2012-04-12 15:22:24

标签: c++ python cython

我有一个带有虚方法的C ++类:

//C++
class A
{

    public:
        A() {};
        virtual int override_me(int a) {return 2*a;};
        int calculate(int a) { return this->override_me(a) ;}

};

我想要做的是使用Cython将此类暴露给Python,从Python继承此类并具有正确的重写名称:

#python:
class B(PyA):
   def override_me(self, a):
       return 5*a
b = B()
b.calculate(1)  # should return 5 instead of 2

有办法做到这一点吗? 现在我想,如果我们可以在Cython中覆盖虚拟方法(在pyx文件中)也可能很棒,但允许用户在纯python中执行此操作更为重要。

修改:如果这有帮助,解决方案可能是使用此处给出的伪代码:http://docs.cython.org/src/userguide/pyrex_differences.html#cpdef-functions

但是有两个问题:

  • 我不知道如何在Cython中编写这个伪代码
  • 也许有更好的方法

2 个答案:

答案 0 :(得分:10)

解决方案有点复杂,但有可能。这里有一个完整的例子:https://bitbucket.org/chadrik/cy-cxxfwk/overview

以下是该技术的概述:

创建class A的专用子类,其目的是与cython扩展交互:

// created by cython when providing 'public api' keywords:
#include "mycymodule_api.h"

class CyABase : public A
{
public:
  PyObject *m_obj;

  CyABase(PyObject *obj);
  virtual ~CyABase();
  virtual int override_me(int a);
};

构造函数接受一个python对象,它是我们的cython扩展的实例:

CyABase::CyABase(PyObject *obj) :
  m_obj(obj)
{
  // provided by "mycymodule_api.h"
  if (import_mycymodule()) {
  } else {
    Py_XINCREF(this->m_obj);
  }
}

CyABase::~CyABase()
{
  Py_XDECREF(this->m_obj);
}

在cython中创建此子类的扩展,以标准方式实现所有非虚方法

cdef class A:
    cdef CyABase* thisptr
    def __init__(self):
        self.thisptr = new CyABase(
            <cpy_ref.PyObject*>self)

    #------- non-virutal methods --------
    def calculate(self):
        return self.thisptr.calculate()

将虚拟和纯虚方法创建为public api函数,将扩展实例,方法参数和错误指针作为参数:

cdef public api int cy_call_override_me(object self, int a, int *error):
    try:
        func = self.override_me
    except AttributeError:
        error[0] = 1
        # not sure what to do about return value here...
    else:
        error[0] = 0
        return func(a)

在c ++中间函数中使用这些函数,如下所示:

int
CyABase::override_me(int a)
{
  if (this->m_obj) {
    int error;
    // call a virtual overload, if it exists
    int result = cy_call_override_me(this->m_obj, a, &error);
    if (error)
      // call parent method
      result = A::override_me(i);
    return result;
  }
  // throw error?
  return 0;
}

我很快将我的代码改编为你的例子,所以可能会有错误。看一下存储库中的完整示例,它应该回答您的大部分问题。随意分叉并添加自己的实验,它还远未完成!

答案 1 :(得分:9)

太棒了!

不完整但足够。 为了我自己的目的,我已经能够做到这一点。将此帖与上面链接的来源相结合。 这并不容易,因为我是Cython的初学者,但我确认这是我在www上找到的唯一方式。

非常感谢你们。

对不起,我没有那么多时间进入文本细节,但这里是我的文件(可能有助于获得关于如何将所有这些放在一起的额外观点)

setup.py:

from distutils.core import setup
from distutils.extension import Extension
from Cython.Distutils import build_ext

setup(
    cmdclass = {'build_ext': build_ext},
    ext_modules = [
    Extension("elps", 
              sources=["elps.pyx", "src/ITestClass.cpp"],
              libraries=["elp"],
              language="c++",
              )
    ]
)

TestClass:

#ifndef TESTCLASS_H_
#define TESTCLASS_H_


namespace elps {

class TestClass {

public:
    TestClass(){};
    virtual ~TestClass(){};

    int getA() { return this->a; };
    virtual int override_me() { return 2; };
    int calculate(int a) { return a * this->override_me(); }

private:
    int a;

};

} /* namespace elps */
#endif /* TESTCLASS_H_ */

ITestClass.h:

#ifndef ITESTCLASS_H_
#define ITESTCLASS_H_

// Created by Cython when providing 'public api' keywords
#include "../elps_api.h"

#include "../../inc/TestClass.h"

namespace elps {

class ITestClass : public TestClass {
public:
    PyObject *m_obj;

    ITestClass(PyObject *obj);
    virtual ~ITestClass();
    virtual int override_me();
};

} /* namespace elps */
#endif /* ITESTCLASS_H_ */

ITestClass.cpp:

#include "ITestClass.h"

namespace elps {

ITestClass::ITestClass(PyObject *obj): m_obj(obj) {
    // Provided by "elps_api.h"
    if (import_elps()) {
    } else {
        Py_XINCREF(this->m_obj);
    }
}

ITestClass::~ITestClass() {
    Py_XDECREF(this->m_obj);
}

int ITestClass::override_me()
{
    if (this->m_obj) {
        int error;
        // Call a virtual overload, if it exists
        int result = cy_call_func(this->m_obj, (char*)"override_me", &error);
        if (error)
            // Call parent method
            result = TestClass::override_me();
        return result;
    }
    // Throw error ?
    return 0;
}

} /* namespace elps */

EDIT2:关于PURE虚拟方法的说明(它似乎是一个经常出现的问题)。如上面的代码所示,以这种特殊的方式,“TestClass :: override_me()”不能是纯粹的,因为它必须是可调用的,以防方法在Python的扩展类中没有被覆盖(又名:一个不属于“ITestClass :: override_me()”正文的“错误”/“覆盖未找到”部分。

扩展名:elps.pyx:

cimport cpython.ref as cpy_ref

cdef extern from "src/ITestClass.h" namespace "elps" :
    cdef cppclass ITestClass:
        ITestClass(cpy_ref.PyObject *obj)
        int getA()
        int override_me()
        int calculate(int a)

cdef class PyTestClass:
    cdef ITestClass* thisptr

    def __cinit__(self):
       ##print "in TestClass: allocating thisptr"
       self.thisptr = new ITestClass(<cpy_ref.PyObject*>self)
    def __dealloc__(self):
       if self.thisptr:
           ##print "in TestClass: deallocating thisptr"
           del self.thisptr

    def getA(self):
       return self.thisptr.getA()

#    def override_me(self):
#        return self.thisptr.override_me()

    cpdef int calculate(self, int a):
        return self.thisptr.calculate(a) ;


cdef public api int cy_call_func(object self, char* method, int *error):
    try:
        func = getattr(self, method);
    except AttributeError:
        error[0] = 1
    else:
        error[0] = 0
        return func()

最后,python调用:

from elps import PyTestClass as TC;

a = TC(); 
print a.calculate(1);

class B(TC):
#   pass
    def override_me(self):
        return 5

b = B()
print b.calculate(1)

这应该使之前的链接工作更加直接到我们在这里讨论的地步......

编辑:另一方面,可以使用'hasattr'而不是try / catch块来优化上面的代码:

cdef public api int cy_call_func_int_fast(object self, char* method, bint *error):
    if (hasattr(self, method)):
        error[0] = 0
        return getattr(self, method)();
    else:
        error[0] = 1

上述代码当然只会在我们不覆盖'override_me'方法的情况下产生影响。