如何使用Azure Data Lake Storage Gen2和Azure Data factory V2执行基于事件的数据提取?

时间:2019-03-06 09:18:21

标签: azure azure-storage azure-data-lake azure-data-factory-2

最近,我们遇到了一种情况,我们的源和接收器位置均为ADLS Gen2类型。现在,我们得到了一个有趣的用例,其中我们必须借助ADF V2将数据从源推送到接收器。话虽如此,它不仅是我们期望的正常复制活动,而且我们需要在事件的基础上执行此活动。

在查阅ADLS Gen2文档时发现,ADLS Gen2尚不支持“ Azure事件网格”,这就是我们能够配置ADF基于事件的触发器不起作用的原因。

任何人都可以建议我解决这种情况,因为在此情况下不支持Azure Event Gird,我们不认为我们可以使用Azure Event Hub及其与ADF的集成来实现这一目标?

谢谢。

1 个答案:

答案 0 :(得分:1)

从我的repro来看,当前仅基于事件的触发器仅在v2存储帐户上受支持。

Data Factory现在与Azure Event Grid集成在一起,可让您在事件上触发管道。

注意:该集成仅支持版本2存储帐户(通用)。

Azure事件网格无法从Azure Data Lake Gen2帐户接收事件,因为这些帐户尚未生成事件。

有关更多详细信息,请参阅“ Known issues with Azure Data Lake Storage Gen2”。