使用Crontab的Celery每日计划任务

Question

使用crontab我的日常计划任务有问题。这是我的celery.py

app.conf.beat_schedule = {
    'run-cache-updater': {
        'task': 'tasks.run_cache_updater',
        'schedule': crontab(
            minute=0,
            hour='1-4'
        ),
    }
}

下面是我的tasks.py我在做什么，从DB获取所有记录。触发其他作业以更新Redis上的缓存。

@app.task
def run_cache_updater():
    batch_size = 1000
    cache_records = models.CacheRecords.objects.all()

    def _chunk_list(all_records, size_of_batch):
        for i in range(0, len(all_records), size_of_batch):
            yield [item.id for item in all_records[i: i + batch_size]]

    for items in _chunk_list(cache_records, batch_size):
        update_cache.delay(items)


@app.task
def update_cache(ids_in_chunks):
    for id in ids_in_chunks:
        # Some calls are done here. Then sleep for 200 ms.
        time.sleep(0.2)

我的任务运行良好。然而，他们开始在1到4之间运行，然后他们每隔4小时再次开始，比如8-11,15-18。我在这里做错了，我该如何解决？

Answer 1

这听起来像一个芹菜虫，它可能值得提升他们的Github回购。

但是，作为一种解决方法，您可以尝试使用更明确的表示法hour='1,2,3,4'，以防万一问题在于解析特定的crontab间隔样式。