在组的子任务之间添加延迟

时间:2017-10-19 18:24:06

标签: celery celerybeat

我正在创建一个Celery group来并行执行一堆进程。以下是代码 -

@periodic_task(run_every=timedelta(minutes=1))
def schedule_pivots():
    today_list="A,B,C,D"
    g = group(get_pivots.s(l,'OPT') for l in today_list.split(','))
    g.set(countdown=100).delay()

'get_pivots'是平行调用的任务。此任务调用外部API,如果在500毫秒内调用,则限制速率。有没有办法在每次执行任务'get_pivots'之间引入延迟?

1 个答案:

答案 0 :(得分:0)

刚试过这个

@celery.task(rate_limit='10/m')
def add(x, y):
    return x + y

从python解释器调用此任务时

>>> g = group(add.s(i, i + 1) for i in range(10))
>>> r = g()
>>> r.get()

最后一部分冻结,直到一切都完成,希望有所帮助