IntegrityError(Django ORM)

时间:2017-10-10 07:41:19

标签: python django postgresql django-orm

我在Django的IntegrityError中缺少表名:

Traceback (most recent call last):
...
    return self.cursor.execute(sql, params)
  File ".../django/db/utils.py", line 94, in __exit__
    six.reraise(dj_exc_type, dj_exc_value, traceback)
  File ".../django/db/backends/utils.py", line 64, in execute
    return self.cursor.execute(sql, params)
IntegrityError: null value in column "manager_slug" violates not-null constraint
DETAIL:  Failing row contains (17485, null, 2017-10-10 09:32:19, , 306).

有没有办法查看INSERT / UPDATE正在访问哪个表?

我们使用PostgreSQL 9.6。

这是一般性问题:如何获得更好的错误消息?

这不是关于这个特定专栏的问题。我很快就找到了相关的表格和专栏。但我想改进来自CI系统的错误消息。下次我想立即看到表名。

我知道如果在软件开发过程中看到此错误,我可以使用调试器轻松地显示缺少的信息。但在我的情况下,这发生在生产中,我只有像上面那样的堆栈跟踪。

7 个答案:

答案 0 :(得分:6)

此回溯中的异常消息是来自数据库驱动程序的原始消息。知道这个和回溯是有用的,如果有任何谷歌搜索,报告等。

异常类对于所有后端都是相同的django.db.utils。 IntegrityError ,但消息或更确切的参数取决于后端:

  • postgres null value in column "manager_slug" violates not-null constraint\n DETAILS...\n
  • mysql 。 。 :(1048, "Column 'manager_slug' cannot be null")
  • sqlite3 。 :NOT NULL constraint failed: appname_modelname.manager_slug

表名仅在sqlite3后端可见。一些后端仅使用异常的字符串参数,但mysql使用两个参数:数字错误代码和消息。 (我喜欢接受这是一个普遍的问题,不仅仅是PostgreSQL。)一些后端的作者希望应用程序的作者直接或从SQL知道表名,但对于一般的ORM包不是这样。没有优选且通常可接受的方式,即使可以在技术上完善,也可以扩展消息。

开发和调试很简单:

  • 在开发中的DEBUG模式中有很多其他信息(最后一帧中的“SQL”或像“myobj.save()”这样的行上的对象的类名)
  • python manage.py test --debug-sql:“在失败时打印已记录的SQL查询。”
  • 使用sqlite3进行开发/测试时的相同错误更容易阅读。

...但您可能要求在生产中出现运行时错误。

我想在一个如此笼统的问题中你的可能意图,你可能会感兴趣的方向。

A) 追溯中最重要的信息通常是以上的几行“...... / django的/分贝/..."。这对古茹来说非常容易。如果代码不像Django管理站点那样动态和通用,很可能会使用它,其中myobj.save()附近没有代码调用(父帧中都没有)包含显式模型名称。例如:

# skip some initial universal code in ".../django/..."
...
# our apps start to be interesting... (maybe other installed app)
...
# START HERE: Open this line in the editor. If the function is universal, jump to the previous.
File ".../me/app/...py", line 47, in my...
  my_obj.save()
# skip many stack frames .../django/db/... below
File ".../django/db/models/base.py", line 734, in save
  # self.save_base(...    # this line 733 is not visible
      force_update=force_update, update_fields=update_fields)
...
# interesting only sql and params, but not visible in production
File ".../django/db/backends/utils.py", line 64, in execute
  return self.cursor.execute(sql, params)
IntegrityError (or DataError similarly)...

B)通过模特的共同祖先抓住信息

class ...(models.Model):
    def save(self, *args, **wkargs):
        try:
            super(..., self).save(*args, **wkargs)
        except django.db.utils.IntegrityError as exc:
            new_message = 'table {}'.format(self._meta.db_table)
            exc.extra_info = new_message
            # this is less compatible, but it doesn't require additional reading support
            # exc.args = exc.args + (new_message,)
            reraise

这可能会使多重继承的调试变得复杂。

C) Django db 中的实现会更好,但我无法想象在某些问题之后它会被接受而不会被还原。

答案 1 :(得分:2)

如果你可以创建sql函数,你可以尝试:

创建函数以获取最后一个序列值get_sequence_last_value(original post

CREATE FUNCTION public.get_sequence_last_value(name) RETURNS int4 AS '
DECLARE
ls_sequence ALIAS FOR $1;
lr_record RECORD;
li_return INT4;
BEGIN
FOR lr_record IN EXECUTE ''SELECT last_value FROM '' || ls_sequence LOOP
li_return := lr_record.last_value;
END LOOP;
RETURN li_return;
END;' LANGUAGE 'plpgsql' VOLATILE;

在获取具有更多序列的表之后,在错误堆栈中,并且具有列manager_slug

SELECT table_name, column_name 
FROM information_schema.columns 
WHERE table_name in (
    SELECT table_name

    FROM (
        SELECT table_name,
               get_sequence_last_value(
                    substr(column_default, 10, strpos(column_default, '::regclass') - 11)
                    ) as lv
        FROM information_schema.columns 
        WHERE column_default LIKE 'nextval%'
        ) as t_seq_lv

    WHERE lv > 17485
    )
   AND column_name = 'manager_slug';

我知道解决方案并不完整,但我希望它可以帮助你

答案 2 :(得分:2)

我建议使用Sentry(https://sentry.io/welcome/)。在Sentry问题中,您可以观察堆栈跟踪的所有部分的所有局部变量。screenshot of a sentry issue

答案 3 :(得分:2)

我在您的问题中找到的最佳解决方案是覆盖<a href="#" data-toggle="tooltip" title="<span class='a'>2</span> x <span class='b'>5</span>"> Hover Me </a> <button class="update">Update Tooltip</button> 方法,为此,请转到DataBaseErrorWrapper,然后在第86行替换\django\db\utils.py

dj_exc_value = dj_exc_type(*exc_value.args)

如果出现IntegrityError,则消息应该有效

if exec_value.diag:
    a, b = exc_value.args + ("In the table '%s'" % exc_value.diag.table_name,)
    dj_exc_value = dj_exc_type(a + b)
else:
    dj_exc_value = dj_exc_type(*exc_value.args)

我不确定但这应该适用于以下例外情况:

django.db.utils.IntegrityError: null value in column "signature" violates not-null constraint
DETAIL:  Failing row contains (89, null).
In the table 'teachers_signature'

它对我有用,告诉我是否适合你。请记住使用您正在使用的Django文件夹编辑文件

答案 4 :(得分:0)

您错过了“manager_slug”列的设置值。您无法在此列设置NULL值。您应该设置值或删除非空条件。

IntegrityError: null value in column "manager_slug" violates not-null constraint

答案 5 :(得分:0)

  

有没有办法查看INSERT / UPDATE正在访问哪个表?

如果您正在运行migrate,则可以访问stdout并检查正在执行的迁移。然后,您可以打开迁移文件并更好地概述该问题。

如果您不想,我想看一下PEP249的可选错误处理。因为django数据库包装器基于PEP249规范。

DatabaseErrorWrapper

中对django代码的引用

第二次编辑:

您可以捕获完整性错误并从数据库包装器访问.messages属性。

伪示例:

try:
    # operation on database
except IntegrityError as ie:
    print(ie.wrapper.cursor.messages[:])

答案 6 :(得分:0)

我倾向于使用尽可能少的依赖性并保留第三方库。

大多数时候,我会记录每个sql insert / update / delete查询。通过这种方式,我可以轻松识别哪个查询出错,而无需额外的努力。这使我可以跟踪谁在我的系统中做了什么。

这恰好符合我所在行业的行动跟踪监管要求的一部分。