Question

我在使用crontab进行日常计划任务时遇到问题。这是我的celery.py

app.conf.beat_schedule = {
    'run-cache-updater': {
        'task': 'tasks.run_cache_updater',
        'schedule': crontab(
            minute=0,
            hour='1-4'
        ),
    }
}

以下是我的task.py 我在那里所做的就是从数据库获取所有记录。触发其他作业以更新我在Redis上的缓存。

@app.task
def run_cache_updater():
    batch_size = 1000
    cache_records = models.CacheRecords.objects.all()

    def _chunk_list(all_records, size_of_batch):
        for i in range(0, len(all_records), size_of_batch):
            yield [item.id for item in all_records[i: i + batch_size]]

    for items in _chunk_list(cache_records, batch_size):
        update_cache.delay(items)


@app.task
def update_cache(ids_in_chunks):
    for id in ids_in_chunks:
        # Some calls are done here. Then sleep for 200 ms.
        time.sleep(0.2)

我的任务运行良好。但是，它们开始在1到4之间运行，然后每4小时重新启动一次，例如8-11、15-18。我在这里做错了什么以及如何解决？

Answer 1

这听起来像是芹菜的虫子，可能值得在他们的Github存储库中提出来。

但是，作为解决方法，您可以尝试使用更明确的表示法hour='1,2,3,4'，以防万一问题在于该特定crontab间隔样式的解析中。

Crontab的芹菜每日计划任务

1 个答案: