我们可以在Spark结构化流流程中查找HBase表吗

时间:2019-09-17 16:32:51

标签: apache-spark hbase spark-streaming spark-structured-streaming

我有一个Spark结构化流应用程序,该应用程序从Kafka读取数据并写入HBase和Kafka,在此过程中,从kafka读取数据后,我想查找HBase表,有人可以建议可用的选项,并带有示例代码吗?你有一个。

我曾尝试使用SHC(Spark HBase连接器),但是使用SHC读取HBASE表意味着在另一个数据帧上迭代了数据帧,该动态过滤器似乎并不太喜欢。

0 个答案:

没有答案