GCP Dataflow日志记录流利

Question

我们希望将来自应用程序和GCP服务的日志整合到一个日志系统中。在K8s中运行的应用程序将转发到一个流畅的实例，然后该实例将日志传递到我们的Logging系统。 （Humio）对于GCP服务，尤其是数据流，日志记录指向Stackdriver。 （Google云日志记录）。

在Dataflow中具有自定义登录附加程序的实验未成功。 DF apparently doesn't allow custom appenders。

流式堆栈驱动程序日志出站到流畅服务器的选项有哪些？任何人都经历过吗？

谢谢

Answer 1

我认为，您最好的选择是为这些日志创建类似PubSub接收器的东西，然后让其他东西从接收器中提取这些日志并将其写入最终目的地。