IntegrityError（Django ORM）

Question

我在Django的IntegrityError中缺少表名：

Traceback (most recent call last):
...
    return self.cursor.execute(sql, params)
  File ".../django/db/utils.py", line 94, in __exit__
    six.reraise(dj_exc_type, dj_exc_value, traceback)
  File ".../django/db/backends/utils.py", line 64, in execute
    return self.cursor.execute(sql, params)
IntegrityError: null value in column "manager_slug" violates not-null constraint
DETAIL:  Failing row contains (17485, null, 2017-10-10 09:32:19, , 306).

有没有办法查看INSERT / UPDATE正在访问哪个表？

我们使用PostgreSQL 9.6。

这是一般性问题：如何获得更好的错误消息？

这不是关于这个特定专栏的问题。我很快就找到了相关的表格和专栏。但我想改进来自CI系统的错误消息。下次我想立即看到表名。

我知道如果在软件开发过程中看到此错误，我可以使用调试器轻松地显示缺少的信息。但在我的情况下，这发生在生产中，我只有像上面那样的堆栈跟踪。

Answer 1

此回溯中的异常消息是来自数据库驱动程序的原始消息。知道这个和回溯是有用的，如果有任何谷歌搜索，报告等。

异常类对于所有后端都是相同的django.db.utils。 IntegrityError ，但消息或更确切的参数取决于后端：

• postgres ：null value in column "manager_slug" violates not-null constraint\n DETAILS...\n
• mysql 。 。 ：(1048, "Column 'manager_slug' cannot be null")
• sqlite3 。 ：NOT NULL constraint failed: appname_modelname.manager_slug

表名仅在sqlite3后端可见。一些后端仅使用异常的字符串参数，但mysql使用两个参数：数字错误代码和消息。 （我喜欢接受这是一个普遍的问题，不仅仅是PostgreSQL。）一些后端的作者希望应用程序的作者直接或从SQL知道表名，但对于一般的ORM包不是这样。没有优选且通常可接受的方式，即使可以在技术上完善，也可以扩展消息。

开发和调试很简单：

• 在开发中的DEBUG模式中有很多其他信息（最后一帧中的“SQL”或像“myobj.save（）”这样的行上的对象的类名）
• python manage.py test --debug-sql：“在失败时打印已记录的SQL查询。”
• 使用sqlite3进行开发/测试时的相同错误更容易阅读。

...但您可能要求在生产中出现运行时错误。

我想在一个如此笼统的问题中你的可能意图，你可能会感兴趣的方向。

A） 追溯中最重要的信息通常是以上的几行“...... / django的/分贝/..."。这对古茹来说非常容易。如果代码不像Django管理站点那样动态和通用，很可能会使用它，其中myobj.save()附近没有代码调用（父帧中都没有）包含显式模型名称。例如：

# skip some initial universal code in ".../django/..."
...
# our apps start to be interesting... (maybe other installed app)
...
# START HERE: Open this line in the editor. If the function is universal, jump to the previous.
File ".../me/app/...py", line 47, in my...
  my_obj.save()
# skip many stack frames .../django/db/... below
File ".../django/db/models/base.py", line 734, in save
  # self.save_base(...    # this line 733 is not visible
      force_update=force_update, update_fields=update_fields)
...
# interesting only sql and params, but not visible in production
File ".../django/db/backends/utils.py", line 64, in execute
  return self.cursor.execute(sql, params)
IntegrityError (or DataError similarly)...

B）通过模特的共同祖先抓住信息

class ...(models.Model):
    def save(self, *args, **wkargs):
        try:
            super(..., self).save(*args, **wkargs)
        except django.db.utils.IntegrityError as exc:
            new_message = 'table {}'.format(self._meta.db_table)
            exc.extra_info = new_message
            # this is less compatible, but it doesn't require additional reading support
            # exc.args = exc.args + (new_message,)
            reraise

这可能会使多重继承的调试变得复杂。

C） Django db 中的实现会更好，但我无法想象在某些问题之后它会被接受而不会被还原。

Answer 2

如果你可以创建sql函数，你可以尝试：

创建函数以获取最后一个序列值get_sequence_last_value（original post）

CREATE FUNCTION public.get_sequence_last_value(name) RETURNS int4 AS '
DECLARE
ls_sequence ALIAS FOR $1;
lr_record RECORD;
li_return INT4;
BEGIN
FOR lr_record IN EXECUTE ''SELECT last_value FROM '' || ls_sequence LOOP
li_return := lr_record.last_value;
END LOOP;
RETURN li_return;
END;' LANGUAGE 'plpgsql' VOLATILE;

在获取具有更多序列的表之后，在错误堆栈中，并且具有列manager_slug

SELECT table_name, column_name 
FROM information_schema.columns 
WHERE table_name in (
    SELECT table_name

    FROM (
        SELECT table_name,
               get_sequence_last_value(
                    substr(column_default, 10, strpos(column_default, '::regclass') - 11)
                    ) as lv
        FROM information_schema.columns 
        WHERE column_default LIKE 'nextval%'
        ) as t_seq_lv

    WHERE lv > 17485
    )
   AND column_name = 'manager_slug';

我知道解决方案并不完整，但我希望它可以帮助你

Answer 3

我建议使用Sentry（https://sentry.io/welcome/）。在Sentry问题中，您可以观察堆栈跟踪的所有部分的所有局部变量。

Answer 4

我在您的问题中找到的最佳解决方案是覆盖<a href="#" data-toggle="tooltip" title="<span class='a'>2</span> x <span class='b'>5</span>"> Hover Me </a> <button class="update">Update Tooltip</button> 方法，为此，请转到DataBaseErrorWrapper，然后在第86行替换\django\db\utils.py：

dj_exc_value = dj_exc_type(*exc_value.args)

如果出现IntegrityError，则消息应该有效

if exec_value.diag:
    a, b = exc_value.args + ("In the table '%s'" % exc_value.diag.table_name,)
    dj_exc_value = dj_exc_type(a + b)
else:
    dj_exc_value = dj_exc_type(*exc_value.args)

我不确定但这应该适用于以下例外情况：

django.db.utils.IntegrityError: null value in column "signature" violates not-null constraint
DETAIL:  Failing row contains (89, null).
In the table 'teachers_signature'

它对我有用，告诉我是否适合你。请记住使用您正在使用的Django文件夹编辑文件

Answer 5

您错过了“manager_slug”列的设置值。您无法在此列设置NULL值。您应该设置值或删除非空条件。

IntegrityError: null value in column "manager_slug" violates not-null constraint

Answer 6

  

有没有办法查看INSERT / UPDATE正在访问哪个表？

如果您正在运行migrate，则可以访问stdout并检查正在执行的迁移。然后，您可以打开迁移文件并更好地概述该问题。

如果您不想，我想看一下PEP249的可选错误处理。因为django数据库包装器基于PEP249规范。

DatabaseErrorWrapper

中对django代码的引用

第二次编辑：

您可以捕获完整性错误并从数据库包装器访问.messages属性。

伪示例：

try:
    # operation on database
except IntegrityError as ie:
    print(ie.wrapper.cursor.messages[:])

Answer 7

我倾向于使用尽可能少的依赖性并保留第三方库。

大多数时候，我会记录每个sql insert / update / delete查询。通过这种方式，我可以轻松识别哪个查询出错，而无需额外的努力。这使我可以跟踪谁在我的系统中做了什么。

这恰好符合我所在行业的行动跟踪监管要求的一部分。