RabbitMQ / Pika阻止用户使用偶数

时间:2018-07-04 02:02:55

标签: python python-2.7 rabbitmq pika eventlet

我正在开发一个需要eventlet的大型应用程序,现在还需要RabbitMQ。看来eventlet导致pika使用者线程阻止了其他工作程序的执行。我知道Pika不被认为是线程安全的,因此我在自己的线程中拥有一切,包括连接。我假设阻塞连接应该只阻塞使用者线程。如何使pika和eventlet一起工作?在下面的示例中,worker线程从不打印任何内容,但注释掉eventlet.monkey_patch()可使两个线程都执行。

import threading
import pika

import eventlet
eventlet.monkey_patch()


def callback(ch, method, properties, body):
    print body
    ch.basic_ack(delivery_tag=method.delivery_tag)


def consumer():
    connection = pika.BlockingConnection(pika.ConnectionParameters('localhost'))
    channel = connection.channel()
    channel.queue_declare(queue='test', durable=True,
                          exclusive=False, auto_delete=False)
    channel.basic_consume(callback, queue='test')
    channel.start_consuming()


def start_consumer_thread():
    # initialize a listener thread
    consumer_thread = threading.Thread(target=consumer)
    consumer_thread.start()

def worker():
    start_consumer_thread()
    for x in range(1,10000):
        print x


x = threading.Thread(target=worker())
x.start()

2 个答案:

答案 0 :(得分:1)

Pika和eventlet.monkey_patch不兼容。如果可能的话,您将必须使用eventlet而不修补系统调用。


注意: RabbitMQ团队监视the rabbitmq-users mailing list,并且有时仅在StackOverflow上回答问题。

答案 1 :(得分:0)

通过猴子修补,我能够使pika的消费者与eventlet一起工作,并以修补方式导入pika

首先导入并修补stdlib:

import eventlet
eventlet.monkey_patch()

然后导入并修补pika本身:

pika = eventlet.import_patched('pika')

我将此导入策略与异步_consumer_example:https://pika.readthedocs.io/en/stable/examples/asynchronous_consumer_example.html结合使用,并使用eventlet原语而不是threading来实现非阻塞消费者。