是否可以通过Spark Streaming数据运行Shark查询?

时间:2014-06-04 23:58:13

标签: apache-spark shark-sql

是否可以对Spark Streaming应用程序的DStreams中包含的数据运行Shark查询? (对于foreachRDD电话内的信息)

是否有任何特定的API可以做到这一点?

感谢。

1 个答案:

答案 0 :(得分:0)

如果有人担心同样的问题,请回答我的问题: 直接回答我的问题是NO,你不能直接在Spark Streaming数据上运行Shark。

Spark SQL目前是一种有效的替代方案,至少它符合我的需求。 它包含在Spark中,不需要更多配置,您可以在此处查看:http://spark.apache.org/docs/latest/sql-programming-guide.html