使用django和芹菜运行定期任务

时间:2012-04-29 13:02:37

标签: django celery task

我正在尝试使用Django-Celery-RabbitMQ组合创建一个简单的后台周期性任务。我安装了Django 1.3.1,我下载并设置了djcelery。以下是我的settings.py文件的样子:

BROKER_HOST = "127.0.0.1"
BROKER_PORT = 5672
BROKER_VHOST = "/"
BROKER_USER = "guest"
BROKER_PASSWORD = "guest"
....
import djcelery
djcelery.setup_loader()
...
INSTALLED_APPS = (
    'djcelery',
)

我将'tasks.py'文件放在我的应用程序文件夹中,其中包含以下内容:

from celery.task import PeriodicTask
from celery.registry import tasks
from datetime import timedelta
from datetime import datetime

class MyTask(PeriodicTask):
    run_every = timedelta(minutes=1)

    def run(self, **kwargs):
        self.get_logger().info("Time now: " + datetime.now())
        print("Time now: " + datetime.now())

tasks.register(MyTask)

然后我启动了我的django服务器(本地开发实例):

python manage.py runserver

然后我启动celerybeat进程:

python manage.py celerybeat --logfile=<path_to_log_file> -l DEBUG

我可以在日志中看到这样的条目:

[2012-04-29 07:50:54,671: DEBUG/MainProcess] tasks.MyTask sent. id->72a5963c-6e15-4fc5-a078-dd26da663323

我也可以在数据库中看到相应的条目,但我找不到它在run类的实际MyTask函数中指定的文本的记录位置。

我尝试摆弄日志记录设置,尝试使用django记录器而不是芹菜记录器,但没有用。我甚至不确定,我的任务正在执行。如果我在任务中打印任何调试信息,它会去哪里?

此外,这是我第一次使用任何类型的消息排队系统。看起来该任务将作为celerybeat进程的一部分执行 - 在django Web框架之外。我是否仍然可以访问我创建的所有django模型。

谢谢, Venkat。

2 个答案:

答案 0 :(得分:5)

Celerybeat它的东西,它在需要时推送任务,但不执行它们。您在RabbitMq服务器中存储的任务实例。您需要执行celeryd守护程序来执行任务。

python manage.py celeryd --logfile=<path_to_log_file> -l DEBUG

另外,如果您使用RabbitMq,我建议您安装特殊的rabbitmq管理插件:

rabbitmq-plugins list
rabbitmq-enable rabbitmq_management
service rabbitmq-server restart

它将在http://:55672 / login:guest pass:guest中提供。在这里,您可以在线检查兔子实例中的任务数量。

答案 1 :(得分:0)

您应该检查RabbitMQ日志,因为芹菜将任务发送到RabbitMQ并且应该执行它们。因此,任务的所有打印都应该在RabbitMQ日志中。