在Cesk应用程序中获取Celery Group结果

时间:2015-11-09 14:23:10

标签: python flask celery

我正在使用flask,设置一个简单的应用程序,并且我正在尝试学习如何有效地利用芹菜来做工作,并在查询时显示结果。

在最基本的示例中,我通过task.delay(args)创建了一项任务。然后,这个对象让我为作业提取一个ID,我可以通过点击不同的端点来查询。简单。

我的目标是模仿这一点,尽管利用群体。阅读文档,我看到组原语很懒,所以在保存之前我必须实际调用它。

我的问题我肯定来自缺乏理解,但基本上是: 如果我的目标是能够通过烧瓶管道异步并行地运行后台任务组,那么在给定以下约束的情况下如何检索组的.join()结果

  • 请求Endpoint1(可能返回ID)
  • 请求Endpotin2,传递ID以返回完成工作的结果

这是正确的方法吗?或者我应该考虑不同的心态?

Psuedo代码:

# From my apps init
celery_instance = Celery("module.modulename", backend = app.config['CELERY_RESULT_BACKEND'], broker = app.config['CELERY_BROKER_URL'])
celery_instance.conf.update(app.config)

<snip>

from celery import group
from app import celery_instance

@app.route("/status/domain/<id>", methods=['GET'])
def query(id):
  # Works for single job, not job group
  result = celery_instance.AsyncResult(id)
  ...

@app.route("/query/domain/<domain>", methods=['GET'])
def query_by_domain(domain):
  ...
  job = group([task1.delay(domain), task2.delay(domain)])
  return redirect(url_for('app.query', id=job.id), code=302)

1 个答案:

答案 0 :(得分:0)

您需要通过GroupResult.save()方法保存组结果:

@app.route("/query/domain/<domain>", methods=['GET'])
def query_by_domain(domain):
    ...
    job = group([task1.delay(domain), task2.delay(domain)])
    <b>job.save()</b>
    return redirect(url_for('app.query', id=job.id), code=302)

然后,您可以通过GroupResult方法获得GroupResult.restore()

@app.route("/status/domain/<id>", methods=['GET'])
def query(id):
    # Works for single job, not job group
    <b>result = celery_instance.GroupResult.restore(group_id)</b>
    ...