如何从HIVE表中不断地进行Spark流式传输?

时间:2018-06-01 20:07:55

标签: apache-spark apache-spark-sql

我有一个用例来使用Spark不断从HIVE表流式传输。 Spark流需要不断监听该表中的任何插入并对其进行流式处理。 如果可能,请告诉我。 我只遇到过使用sqlContext.sql加载整个表的用例("选择查询")但我的用例是不断从表而不是文件流。 [我认为从表中流式传输将更容易转换为数据帧,而不是从ORC文件流式传输]

0 个答案:

没有答案