我正在尝试使用Confluent Kafka Python从bluemix上的消息中心的主题获取消息。我的代码在下面找到,但有些东西不起作用。主题和消息中心已启动并正在运行,因此可能存在代码。
from confluent_kafka import Producer, KafkaError, Consumer
consumer_settings = {
'bootstrap.servers': 'broker-url-here',
'group.id': 'mygroup',
'default.topic.config': {'auto.offset.reset': 'smallest'},
'sasl.mechanisms': 'PLAIN',
'security.protocol': 'ssl',
'sasl.username': 'username-here',
'sasl.password': 'password-here',
}
c = Consumer(**consumer_settings)
c.subscribe(['topic-here'])
running = True
while running:
msg = c.poll()
if msg.error():
print("Error while retrieving message")
c.close()
sys.exit(10)
elif (msg is not None):
for x in msg:
print(x)
else:
sys.exit(10)
当我运行代码时,它似乎陷入msg = c.poll()
。所以我想它要么无法连接,要么无法检索消息。凭证本身是正确的。
答案 0 :(得分:3)
消费逻辑看起来不错,但消费者的配置不正确。
security.protocol
需要设置为sasl_ssl
ssl.ca.location
需要指向包含受信任证书的PEM文件。该文件的位置因每个操作系统而异,但最常见的是:
/etc/ssl/certs
/etc/pki/tls/cert.pem
/etc/ssl/certs.pem
我们还有一个使用此客户端的示例应用程序,可以轻松启动或部署到Bluemix:https://github.com/ibm-messaging/message-hub-samples/tree/master/kafka-python-console-sample