Question

根据这个帖子，问题得到解决，但似乎不是。 Setting Time Limit on specific task with celery

我目前的Celery版本是3.1.18（Cipater）。

我正在尝试覆盖任务的默认设置。目标是改变任务的softtimelimit和hard time limit，因为同一个任务被用于多种目的。

将soft_time_limit和time_limit传递给MyTask构造函数以更改默认设置。

///celery/app/ task.py
class MyTask(task.Task):   
    time_limit = 100
    soft_time_limit = 110
    max_retries = 0

def __init__(self, time_limit=None, soft_time_limit=None,
             max_retries=None, *args, **kwargs):
    if time_limit:
        self.time_limit = time_limit
    if soft_time_limit:
       self.soft_time_limit = soft_time_limit
    if max_retries:
       self.max_retries = max_retries
    task.Task.__init__(self, *args, **kwargs)


t1 = MyTask(time_limit=30, soft_time_limit=20,
        max_retries=5)
or

t1 = MyTask()
t1.time_limit = 30
t1.soft_time_limit = 20

然后将t1.si（）传递给task.RetryableChain（...）

job = task.RetryableChain(...)
job.delay()

当worker调用run方法时，它仍然会收到旧值（time_limit = 100），其中我设置了time_limit = 30.

如果3.1.18版本中仍然存在该问题，请告诉我。

Answer 1

我必须修复芹菜代码才能使其正常工作。这绝对是一个临时修复，但它的工作原理。我不确定何时使用新值设置属性，然后为什么不将这些属性转移到worker.job。我可以感觉到，当我们调用task.si或s（）时，它会创建一个不包含这些time_limit属性的Signature实例，因此它从存储在类中的原始值中获取。只是一个想法。

t1 = MyTask()
kwargs = {}
kwargs['time_limit'] = 30
kwargs['soft_time_limit'] = 40

t.s(kwargs)

----＆GT;＆GT;＆GT; /celery/worker/job.py

def execute_using_pool(self, pool, **kwargs):
    """Used by the worker to send this task to the pool.

    :param pool: A :class:`celery.concurrency.base.TaskPool` instance.

    :raises celery.exceptions.TaskRevokedError: if the task was revoked
        and ignored.

    """
    uuid = self.id
    task = self.task
    if self.revoked():
        raise TaskRevokedError(uuid)

    hostname = self.hostname
    kwargs = self.kwargs
    if task.accept_magic_kwargs:
        kwargs = self.extend_with_default_kwargs()
    request = self.request_dict
    request.update({'hostname': hostname, 'is_eager': False,
                    'delivery_info': self.delivery_info,
                    'group': self.request_dict.get('taskset')})
    timeout, soft_timeout = request.get('timelimit', (None, None))
    # timeout = timeout or task.time_limit
    # soft_timeout = soft_timeout or task.soft_time_limit
    **# SKAR  request.get(‘time limit’) always returns the original value stored in Task.
    timeout = kwargs.get('time_limit', task.time_limit)
    soft_timeout = kwargs.get('soft_time_limit', task.soft_time_limit)**
    result = pool.apply_async(
        trace_task_ret,
        args=(self.name, uuid, self.args, kwargs, request),
        accept_callback=self.on_accepted,

设置Celery Task属性（即time_limit和soft_time_limit）不起作用

1 个答案: