Apache Beam是否有Https IO连接器？

Question

我希望将我的Beam管道（Java）的输出通过Https写入另一台服务器，但是我没有找到任何内置连接器。我知道可以创建自定义连接器，但是我想首先知道是否已经存在任何内容。

Answer 1

Beam中没有对HTTPS IO的内置支持，这是受支持的IO的列表：https://beam.apache.org/documentation/io/built-in/

Answer 2

正如Anton所说，Beam目前没有对HTTPS IO的内置支持。我在websocket上有一些文档供参考。

但是，执行此类操作的标准方法是在自定义转换中，该转换使用ParDo将每个元素写到端点。

一些可以帮助您入门的参考资料是：

• Websocket实施： https://rmannibucau.metawerx.net/post/apache-beam-websocket-output
• 复合转换： https://beam.apache.org/documentation/programming-guide/#composite-transforms
• ParDo： https://beam.apache.org/documentation/programming-guide/#pardo

作为后续行动，iFeng还将这个问题发布到了开发电子邮件小组，这是该开发人员的后续行动的链接：https://lists.apache.org/thread.html/e082c02fc95354af5ccfc6d50aa9a08a2587c48c88d90e4f9272797b@%3Cdev.beam.apache.org%3E