我正在开发一个需要eventlet的大型应用程序,现在还需要RabbitMQ。看来eventlet导致pika使用者线程阻止了其他工作程序的执行。我知道Pika不被认为是线程安全的,因此我在自己的线程中拥有一切,包括连接。我假设阻塞连接应该只阻塞使用者线程。如何使pika和eventlet一起工作?在下面的示例中,worker线程从不打印任何内容,但注释掉eventlet.monkey_patch()
可使两个线程都执行。
import threading
import pika
import eventlet
eventlet.monkey_patch()
def callback(ch, method, properties, body):
print body
ch.basic_ack(delivery_tag=method.delivery_tag)
def consumer():
connection = pika.BlockingConnection(pika.ConnectionParameters('localhost'))
channel = connection.channel()
channel.queue_declare(queue='test', durable=True,
exclusive=False, auto_delete=False)
channel.basic_consume(callback, queue='test')
channel.start_consuming()
def start_consumer_thread():
# initialize a listener thread
consumer_thread = threading.Thread(target=consumer)
consumer_thread.start()
def worker():
start_consumer_thread()
for x in range(1,10000):
print x
x = threading.Thread(target=worker())
x.start()
答案 0 :(得分:1)
Pika和eventlet.monkey_patch
不兼容。如果可能的话,您将必须使用eventlet
而不修补系统调用。
注意: RabbitMQ团队监视the rabbitmq-users
mailing list,并且有时仅在StackOverflow上回答问题。
答案 1 :(得分:0)
通过猴子修补,我能够使pika
的消费者与eventlet
一起工作,并以修补方式导入pika
。
首先导入并修补stdlib:
import eventlet
eventlet.monkey_patch()
然后导入并修补pika
本身:
pika = eventlet.import_patched('pika')
我将此导入策略与异步_consumer_example:https://pika.readthedocs.io/en/stable/examples/asynchronous_consumer_example.html结合使用,并使用eventlet
原语而不是threading
来实现非阻塞消费者。