结构化Streaming WriteStream到三角洲湖不立即写入

时间:2019-09-13 12:31:50

标签: azure-eventhub azure-databricks delta-lake

我正在从Azure事件中心读取事件,并将数据写入三角洲湖泊表。 当我将事件推送到事件中心时,我期望结构化流能够立即选择记录并将其插入三角洲湖泊表中。但是,即使是单个事件,也需要花费近5分钟的时间(将其插入事件中心后)才能在三角洲湖泊表中显示该记录。我已经尝试了很多次,每次我在Event Hub中插入一条记录时,记录花了将近5分钟的时间才出现在三角洲湖中。

我是否需要配置任何内容以便流媒体以更频繁地选择记录。或者我可以寻找任何痕迹以获得更多的想法。

0 个答案:

没有答案