Celery无法在'utf-8'中记录字符串错误。 UnicodeDecodeError

时间:2018-12-12 13:26:13

标签: django python-2.7 celery

有时我需要使用俄语参数创建错误。例如:

raise FooError(c_(u'Task %(name)s'), params = {'name': "курочка"})

然后我出现此错误:

Traceback (most recent call last):
  File "/usr/lib/python2.7/logging/__init__.py", line 868, in emit
    msg = self.format(record)
  File "/usr/lib/python2.7/logging/__init__.py", line 741, in format
    return fmt.format(record)
  File "/usr/lib/python2.7/logging/__init__.py", line 465, in format
    record.message = record.getMessage()
  File "/usr/lib/python2.7/logging/__init__.py", line 329, in getMessage
    msg = msg % self.args
UnicodeDecodeError: 'ascii' codec can't decode byte 0xd0 in position 0: ordinal not in range(128)

我使用:

Python 2.7.15rc1;

芹菜3.1.19;

django-celery 3.1.17;

Django 1.11.2。

您可以重现该错误:

import logging
from logging import getLogger 
l = getLogger()
handler = logging.FileHandler('/tmp/fh')
l.addHandler(handler)
l.log(50, u'Task 1')
l.log(50, u'Task %(name)s', {'name': "курочка"})

我认为芹菜有问题。如果打开<your part>/lib/python2.7/site-packages/celery/worker/job.py,您将能够看到100-124行。有一些我们将在其中传递参数的消息,例如:

#: Format string used to log task failure.
error_msg = """\
    Task %(name)s[%(id)s] %(description)s: %(exc)s
"""

,并且预期数据将以英文版式为字符串(см。function _log_error(<...>)):

...
exception, traceback, exc_info, internal, sargs, skwargs = (
    safe_repr(eobj),
    safe_str(einfo.traceback),
    einfo.exc_info,
    einfo.internal,
    safe_repr(self.args),
    safe_repr(self.kwargs),
)
…

但是 resp 在我的异常中仅返回带有俄语单词的str,并且全部失败。这就是芹菜的问题。

我也知道我的LANG =“ ru_RU.UTF-8”。我知道: sys.getdefaultencoding()返回«ascii», 如果我写:

reload(sys)
sys.setdefaultencoding(«UTF-8»)

它将解决我的问题,并且我会收到俄语消息。

但是我想有其他解决方案,因为该决定未得到我的批准。

1 个答案:

答案 0 :(得分:0)

我们解决了这个问题!))

首先,我们编辑了文件 ... / init.d / celeryd 。我们在文件中添加了一行:

. /etc/profile.d/lang.sh

第二,我们重写了类format(文件logging.Formatter)中的函数.../python2.7/logging/__init__.py。换句话说,我们创建了一个新类:

class FooFormatter(logging.Formatter):
    def format(self, record):
        if isinstance(record.args, dict):
             for v, k  in records.args.item():
                 records.args[k] = v.decode("utf-8")
        # I do not write everything, but I hope you understand.
        # And there you can do others things.
        return super(FooFormatter, self).format(record)

仅此而已!)非常感谢我的策展人的帮助。