从Google Dataflow流媒体作业保存为弹性搜索

Question

我通过Google Dataflow Streaming作业将数据保存到BigQuery。

我想将此数据插入弹性搜索中以便快速访问。

通过http？

从数据流调用logstach是一个好习惯吗？

Answer 1

Apache Beam Java SDK有一个connector to read from/write to Elastic search。这应优化IO以与Beam模型保持一致。