我有消费者代码:
class Consumer(threading.Thread):
def __init__(self,rabbitMQUrl,dgraphUrl):
super(JaqlConsumer, self).__init__()
self.parameters = pika.URLParameters(rabbitMQUrl)
def run(self):
self.connection = pika.BlockingConnection(self.parameters)
self.channel = self.connection.channel()
self.channel.exchange_declare(exchange='publish', exchange_type='topic')
result = self.channel.queue_declare('', exclusive=True)
queue_name = result.method.queue
self.channel.queue_bind(exchange='publish', queue=queue_name, routing_key='#')
self.channel.basic_qos(prefetch_count=LIMIT)
def process(values):
print ("Process:" + str(len(values)))
def on_message_callback(chan, method_frame, _header_frame, body, userdata=None):
data = json.loads(body)
self.values.append(data)
if (len(self.values) >= LIMIT):
process(self.values)
self.values = []
chan.basic_ack(delivery_tag=method_frame.delivery_tag,multiple=True)
self.consumer_tag = self.channel.basic_consume(
queue=queue_name, on_message_callback=on_message_callback)
self.channel.start_consuming()
def close(self):
if hasattr(self, 'channel'):
self.channel.basic_cancel(self.consumer_tag)
if hasattr(self, 'connection'):
if not self.connection.is_closed:
self.connection.close()
现在这是我的主要 .py。我正在尝试侦听ZK节点,并且当值从false更改为true时,我想从RabbitMQ中使用,而从True更改为false时,我不想连接到RabbitMQ:
consumer = Consumer(brokerUrl)
consumer.setDaemon(True)
def toggleEnabled():
# Get the enabled value from ZK and watch the next change
isEnabled = config.get("enabled",enable_watch)
print (isEnabled)
if isEnabled:
consumer = Consumer(brokerUrl,dgraphUrl)
consumer.setDaemon(True)
consumer.run()
else:
consumer.close()
def enable_watch(event):
toggleEnabled()
toggleEnabled()
while True:
time.sleep(1)
主要问题是,一次切换后,切换代码将无法运行,我认为这是因为当前线程消耗了RabbitMQ(这是我暂停脚本时看到的内容)。从主线程切换到另一个线程的正确设计是什么?
答案 0 :(得分:0)
根据我的经验,您迟早会使用pika和Multithreading遇到问题。我不确定您的实施细节以及您如何正确使用多线程,但我也遇到了使用Pika的问题,我将尝试告诉您是什么帮助我解决了这个问题。 Pika不是线程安全的,因此如果要在线程之间共享通道,则不能将多线程与pika一起使用。这里是github上与此主题的类似讨论的链接:here
因此,如果您仍然想使用多线程和pika,那么对我的建议是对每个线程使用多处理或使用新的Connection。这样每个线程都会有一个独立的Connection。虽然效率不高,但我认为这是目前唯一的选择。
答案 1 :(得分:0)
以下代码应成为您的run()
方法的一部分:
self.consumer_tag = self.channel.basic_consume(
queue=queue_name, on_message_callback=on_message_callback)
self.channel.start_consuming()
将代码粘贴到问题中时是否出错?
我建议将您的代码添加到GitHub存储库或要旨中。然后,在pika-python
邮件列表中询问您的问题,我们将继续为您提供帮助。堆栈溢出不是来回协助的好地方。
注意: RabbitMQ团队监视rabbitmq-users
mailing list,并且有时仅在StackOverflow上回答问题。