在Spark结构化流中,我们可以定义一个流查询,例如:
var writer: DataStreamWriter[Row] = DF.writeStrea
val query = writer.trigger(Trigger.ProcessingTime(option("duration").toInt, TimeUnit.SECONDS)).start()
然后我们可以通过query.id
获取ID,并通过query.RunId
获取runId。
我的问题是我可以使用自己的query.id
的ID进行此类查询吗,我还没有找到像setId
这样的有效方法来设置要查询的ID。