同时运行许多管道

时间:2020-01-30 16:41:54

标签: azure-data-factory

如果我想同时运行这些管道而不是为每个管道运行enter image description here

,这是一个解决方案

2 个答案:

答案 0 :(得分:1)

只需为所有管道同时添加trigger

在ADF门户中:

enter image description here

设置相同的触发器配置时间:

enter image description here

如果要在队列中执行它们,可以使用execute pipeline activity,它允许您调用另一个管道。

答案 1 :(得分:1)

您还可以利用查找活动使用元数据或管道参数表来查找管道,然后将每个循环的set设置为并行处理,以便一次处理多达50个管道。

有关详细信息,请参见“每篇文章”:https://docs.microsoft.com/en-us/azure/data-factory/control-flow-for-each-activity#parallel-execution