如何将python 2 C扩展模块转换为python 3

时间:2019-02-03 22:31:44

标签: python-c-api

我正在尝试编译定义自定义类型的扩展模块。但是,我为此保留了一些python 2代码,但是我一生无法将其转换为python 3模块。

到目前为止,我已经对《 Python简而言之》一书中找到的原始代码进行了调整,以尝试通过将https://docs.python.org/3/extending/newtypes_tutorial.html,but中的一些内容合并到python 3中来进行编译,但我仍然一无所获。我知道这本书的第3版有我尝试编译的python 3版本代码,但我无权使用该书的版本。

因此,这是模块源代码test.c:

#include "Python.h"
#include "structmember.h"

/* per-instance data structure */
typedef struct {
    PyObject_HEAD
    int first, second;
} intpair;

static int
intpair_init(PyObject *self, PyObject *args, PyObject *kwds)
{
 static char* nams[] = {"first","second",NULL};
 int first, second;
 if(!PyArg_ParseTupleAndKeywords(args, kwds, "ii", nams, &first, &second))
 return -1;
 ((intpair*)self)->first = first;
 ((intpair*)self)->second = second;
 return 0;
}

static void
intpair_dealloc(PyObject *self)
{
 self->ob_type->tp_free(self);
}


static PyObject* nothing_method(PyObject* self, PyObject* args)
{
    printf("This does literally nothing!\n");

    Py_RETURN_NONE;
}

static PyMemberDef intpair_members[] = {
 {"first", T_INT, offsetof(intpair, first), 0, "first item" },
 {"second", T_INT, offsetof(intpair, second), 0, "second item" },
 {NULL}
};

static PyTypeObject t_intpair = {
 PyObject_HEAD_INIT(0) /* tp_head */
 0, /* tp_internal */
 "test.intpair", /* tp_name */
 sizeof(intpair), /* tp_basicsize */
 0, /* tp_itemsize */
 intpair_dealloc, /* tp_dealloc */
 0, /* tp_print */
 0, /* tp_getattr */
 0, /* tp_setattr */
 0, /* tp_compare */
 0, /* tp_as_number */
 0, /* tp_as_sequence */
 0, /* tp_as_mapping */
 0, /* tp_hash */
 0, /* tp_call */
 0, /* tp_str */
 PyObject_GenericGetAttr, /* tp_getattro */
 PyObject_GenericSetAttr, /* tp_setattro */
 0, /* tp_as_buffer */
 Py_TPFLAGS_DEFAULT,
 "two ints (first,second)",
 0, /* tp_traverse */
 0, /* tp_clear */
 0, /* tp_richcompare */
 0, /* tp_weaklistoffset */
 0, /* tp_iter */
 0, /* tp_iternext */
 0, /* tp_methods */
 intpair_members, /* tp_members */
 0, /* tp_getset */
  0, /* tp_base */
 0, /* tp_dict */
 0, /* tp_descr_get */
 0, /* tp_descr_set */
 0, /* tp_dictoffset */
 intpair_init, /* tp_init */
 PyType_GenericAlloc, /* tp_alloc */
 PyType_GenericNew, /* tp_new */
 PyObject_Del, /* tp_free */
};


static PyMemberDef Noddy_members[] = {
    {"PI", T_INT, 3, 0, "noddy number"},
    {NULL, NULL, 0, NULL}
};

static PyMethodDef CosMethods[] =
{
     {"does_nothing", nothing_method, METH_VARARGS, "This really does nothing"},
     {NULL, NULL, 0, NULL}
};

static PyModuleDef testmodule = {
    PyModuleDef_HEAD_INIT,
    .m_name = "test",
    .m_doc = "Example module that creates an extension type.",
    .m_size = -1,
    CosMethods,
};

PyMODINIT_FUNC
PyInit_test(void)
{
    PyObject *m;
    if (PyType_Ready(&t_intpair) < 0)
        return NULL;

    m = PyModule_Create(&testmodule);
    if (m == NULL)
        return NULL;

    Py_INCREF(&t_intpair);
    PyModule_AddObject(m, "Custom", (PyObject *) &t_intpair);
    return m;
}

文件setup.py:

from distutils.core import setup, Extension
setup(name="test", version="1.0",
      ext_modules=[
         Extension("test", ["test.c"]),
         ])

我可以使用 python3 setup.py build_ext --inplace 成功编译该模块,但是,当我在python 3中导入此模块时,出现以下错误:

Python 3.7.2 (default, Jan 10 2019, 23:51:51) 
[GCC 8.2.1 20181127] on linux
Type "help", "copyright", "credits" or "license" for more information.
>>> import test
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
SystemError: Type does not define the tp_name field.

我不理解此错误消息,因为在 PyTypeObject 中定义了一个tp_name字段“ test.intpair”。我在这里想念什么?

此外,需要更改此代码以使其能够针对python 3进行编译吗?

谢谢!

1 个答案:

答案 0 :(得分:2)

我很确定漏洞在于:{p}中的行0, /* tp_internal */

 PyObject_HEAD_INIT(0) /* tp_head */
 0, /* tp_internal */
 "test.intpair", /* tp_name */

如果您搜索此行,则在互联网上对该行的唯一引用就是该问题以及您正在使用的书-这完全是非标准的,我也不知道它的来源。我半怀疑Python 2代码使用PyVarObject,然后使用tp_internal来填充大小而不是PyVarObject_HEAD_INIT,但是我看不到本书的相关页面...

The current documentation recommends using C99 initialization喜欢

static PyTypeObject t_intpair = {
    PyObject_HEAD_INIT(0)
    .tp_name = "test.intpair",
    // etc
 };

因此,正确确定属性的顺序不再重要(您未指定的任何内容都初始化为0)。


构建代码会提供有关类型不匹配的一些非常清晰的警告:

  

warning: initialization of ‘long int’ from ‘char *’ makes integer from pointer without a cast [-Wint-conversion] “ test_mod.intpair”,/ * tp_name * /`

您应该注意这些