是否可以在Spark Streaming附近进行实时连接?

时间:2016-02-26 08:26:11

标签: join elasticsearch apache-spark real-time spark-streaming

所以我使用Spark和Spark Streaming进行日志分析,使用Elasticsearch进行搜索和存储。我的目标是将分数与每个会话(一组具有相同ID的日志)相关联,然后将这些分数添加到每个日志记录中。第一部分是使用Spark Streaming的updateStateByKey轻松完成的,但第二部分似乎不可能近乎实时。所以我想知道是否有办法使用我正在使用的相同技术来执行这些连接,或者是否有其他方法可以解决其他解决方案。

0 个答案:

没有答案