在我的数据管道内,我试图合并两个数据集,一个来自SQL表的数据和一个Azure Blob存储中的相应json文件。 SQL数据中的每一行都包含一个Blob文件的名称,我想要实现的是,对于每一行,获取列中提到的文件,将json Blob数据与该行连接起来,然后写入另一个Blob。
首先,我尝试在Lookup
内使用ForEach
和Data Pipelines
活动,将参数化的Blob数据集设置为基于列中的值读取名称,但是后来我找不到任何写方法每个数据以及blob数据,都确实复制了blob文件。
然后我尝试在Lookup Transformation
内使用Data Flows
,但是我没有使用列值作为合并数据的第二个来源。
在数据管道或数据流内部是否总有两个数据集合并,其中一个数据集的名称是动态的?
答案 0 :(得分:0)
是的,您可以在数据流中执行此操作。数据集,文件名,表和列都可以参数化。