为什么只创建一个定期任务?

时间:2018-09-14 15:05:11

标签: python-3.x celery periodic-task

我想通过一个循环创建多个定期任务,但是只创建了列表的最后一个。例如:

@app.on_after_finalize.connect
def setup_periodic_tasks(sender, **kwargs):
    a = [1,3,4,7,8,10]
    for i in a:
        sender.add_periodic_task(crontab(hour=i), task.s())

在运行celery beat -A任务-l调试的任务计划中,我仅看到在10点执行的任务。为什么?

1 个答案:

答案 0 :(得分:2)

通过键将任务存储在字典中。密钥由name参数或repr()参数的sig给定。这里的sig参数是task.s(),每个循环都相同。因此,当它遍历循环时,它将为每个计划覆盖相同的密钥。要修复,请提供唯一的名称:

sender.add_periodic_task(crontab(hour=i), task.s(), name='whatever-{}'.format(i))

这是celery中的relevent source

def add_periodic_task(self, schedule, sig,
                      args=(), kwargs=(), name=None, **opts):
    key, entry = self._sig_to_periodic_task_entry( 
        schedule, sig, args, kwargs, name, **opts)
    if self.configured:
        self._add_periodic_task(key, entry)
    else:
        self._pending_periodic_tasks.append((key, entry))

    return key

def _sig_to_periodic_task_entry(self, schedule, sig,
                                args=(), kwargs={}, name=None, **opts):
    sig = (sig.clone(args, kwargs)
           if isinstance(sig, abstract.CallableSignature)
           else self.signature(sig.name, args, kwargs))
    return name or repr(sig), { # <------------------------------- key created here
        'schedule': schedule,
        'task': sig.name,
        'args': sig.args,
        'kwargs': sig.kwargs,
        'options': dict(sig.options, **opts),
    }

def _add_periodic_task(self, key, entry):
    self._conf.beat_schedule[key] = entry # <--------------------- key can be overwritten

编辑:如@GharianiMohamed the docs state所指出的,hour的{​​{1}}参数可以是“ 0-23代表一天中应该执行的时间。“因此,一种更好的处理方法是完全删除循环:

chrontab