Question

我正在使用芹菜3.0.20，我很难让芹菜任务与不同的队列一起工作。

我的芹菜工人使用队列配置

启动

-Q:w1 default -Q:w2 longrunning

Django设置包含以下芹菜配置：

CELERY_QUEUES = (
    Queue('default', Exchange('default'), routing_key='default'),
    Queue('longrunning', Exchange('longrunning'), routing_key='longrunning'),
)
CELERY_DEFAULT_QUEUE = 'default'
CELERY_DEFAULT_EXCHANGE_TYPE = 'direct'
CELERY_DEFAULT_ROUTING_KEY = 'default'

CELERY_ROUTES = ({'mytasks.task_a.run': {
                    'queue': 'longrunning',
                    'routing_key': 'longrunning'
             }},

到目前为止，这么好。默认情况下，所有任务都在default队列中，task_a进入长时间运行的队列。

task_a模块的实现如下：

from celery import task

@task
def run():
    # do some task work

现在，我遇到的问题是，从celery.Task继承的类实现了不同的任务：

from celery import Task

class AnotherTask(Task):

    def run(self, *args, **kwargs):
        # do some task work

当AnotherTask类现在位于task_b模块中时，我无法在longrunning队列中执行此任务：我尝试将其添加到CELERY_ROUTES不同的队列中品种，没有一个工作：

{'mytasks.task_b': {
    'queue': 'longrunning',
     'routing_key': 'longrunning'
}}

-

{'mytasks.task_b.AnotherTask': {
    'queue': 'longrunning',
     'routing_key': 'longrunning'
}}

-

{'mytasks.task_b.AnotherTask.run': {
    'queue': 'longrunning',
     'routing_key': 'longrunning'
}}

我也尝试切换到默认交换类型'topic'，但这也不起作用。

如何在AnotherTask队列中执行longrunning类中的任务提示？

Answer 1

好的，我发现了问题。

这是因为所有其他任务最终都在longrunning队列中，并且定期开始使用 celerybeat 。新任务是从Web环境开始的。并且celerybeat设置导入了包含CELERY_ROUTES dict的设置，但Web环境设置没有。啊！

芹菜任务路由与CELERY_ROUTES无法使用任务子类

1 个答案: