Azure Data Factory V2探索管道依赖性

时间:2020-09-11 03:32:23

标签: azure azure-data-factory azure-data-factory-2 azure-data-factory-pipeline

我正在使用很多管道,并且涉及很多管道之间的依赖关系。

由于以下几个原因,这并不理想:

  • 越来越难知道您是否在一个管道中进行了更改,还有哪些管道会受到影响
  • 能够记录整体数据工厂结构

理想情况下,我应该能够“选择”一个随机管道,并能够知道它在执行之前和执行之后都具有哪些管道依赖性。

我当时正在考虑使用Data Factory SDK来尝试构建所有管道的依赖关系结构。但是我想我会把它扔在那里,看看是否有人找到了解决方案,或者在陷入困境之前有任何想法。

我感谢任何建议。

干杯,布伦丹

1 个答案:

答案 0 :(得分:1)

Brendan,我们的ADF已连接到git,因此当我想知道如果更改名称为somePipelineName的管道会受到什么影响时,我将转到git bash并键入

grep --color=always -4 "somePipelineName" * 

在管道文件夹中

这可以帮助我找到可以调用管道的所有位置。

更新时间:2020-09-17

我今天注意到,我们现在有相关的管道清单

enter image description here