在Azure数据流内部的查找转换中使用动态数据源名称

时间:2020-03-19 14:19:21

标签: azure azure-data-factory azure-data-flow

在我的数据管道内,我试图合并两个数据集,一个来自SQL表的数据和一个Azure Blob存储中的相应json文件。 SQL数据中的每一行都包含一个Blob文件的名称,我想要实现的是,对于每一行,获取列中提到的文件,将json Blob数据与该行连接起来,然后写入另一个Blob。

首先,我尝试在Lookup内使用ForEachData Pipelines活动,将参数化的Blob数据集设置为基于列中的值读取名称,但是后来我找不到任何写方法每个数据以及blob数据,都确实复制了blob文件。

然后我尝试在Lookup Transformation内使用Data Flows,但是我没有使用列值作为合并数据的第二个来源。

在数据管道或数据流内部是否总有两个数据集合并,其中一个数据集的名称是动态的?

1 个答案:

答案 0 :(得分:0)

是的,您可以在数据流中执行此操作。数据集,文件名,表和列都可以参数化。