芹菜工人/服务器可以接受非芹菜生产者的任务吗?

时间:2012-08-15 06:02:12

标签: rabbitmq celery

我想使用使用java nio编写的彗星服务器来发送实时更新。接收信息时,我希望它扫描数据,并通过rabbitmq将任务发送到工作线程。理想情况下,我希望芹菜服务器位于兔子的另一端,管理将处理这些任务的工作线程池。

然而,根据我的理解,芹菜通过坐在rabbitmq的两端来工作,它基本上通过嵌入消费者和生产者的代码来接管生产者和消费者的角色。有没有办法像我上面描述的那样设置芹菜?感谢

2 个答案:

答案 0 :(得分:8)

没有必要使用Celery发布消息。您可以从自己的应用程序向RabbitMQ或其他代理发布消息,并使用Celery来使用任务。

Celery使用简单的消息protocol。您可以在应用程序中实现客户端。

如果您不想实现协议的客户端,您可以实现一个简单的http服务器,它接受请求并进行适当的调用。与this一样。

答案 1 :(得分:7)

是的,是cource!

您可以将Custom Message Consumers添加到芹菜应用。

请参阅芹菜文件中的Extensions and Bootsteps

以上链接中的示例代码的一部分:

from celery import Celery
from celery import bootsteps
from kombu import Consumer, Exchange, Queue

my_queue = Queue('custom', Exchange('custom'), 'routing_key')

app = Celery(broker='amqp://')


class MyConsumerStep(bootsteps.ConsumerStep):

    def get_consumers(self, channel):
        return [Consumer(channel,
                         queues=[my_queue],
                         callbacks=[self.handle_message],
                         accept=['json'])]

    def handle_message(self, body, message):
        print('Received message: {0!r}'.format(body))
        message.ack()
app.steps['consumer'].add(MyConsumerStep)

测试它:

  

python -m芹菜 - 主要工作者

另请参阅:Using Celery with existing RabbitMQ messages