如何将触发器管道时间从主管道传递到调用管道

时间:2020-03-22 14:10:08

标签: azure azure-pipelines azure-data-factory azure-triggers

想知道是否有人可以帮助解决以下问题。我创建了一个管道,该管道可以执行(调用)其他一些管道,并将数据从Source提取到不同的Data Lake文件夹中(基于管道触发器的日期时间)。然后,使用Data-bricks笔记本转换此数据(屏幕截图1)。现在,此笔记本使用从Trigger传递的DateTime仅处理最新文件。当我运行管道时,文件夹创建基于调用的管道而不是主管道。然后,这将导致Databrick笔记本执行失败,因为Notebook无法从Master上基于Trigger.Pipeline日期时间找到该文件夹​​。任何想法我怎么能将Trigger.Pipeline时间从Master传递到调用的(执行的管道),以便整个过程是同步的,并使用Master的触发时间而不是调用的管道。 enter image description here

enter image description here

enter image description here

0 个答案:

没有答案