(Azure)从数据工厂到数据仓库-动态命名登陆表和模式

时间:2018-07-03 11:30:05

标签: ssis azure-data-factory-2 parallel-data-warehouse

我计划使用Azure数据工厂(ADF)定期从多个数据库中移动数据,并且希望将数据移动到Azure并行数据仓库(APDW)中。但是,ADF向导中的“目的地”步骤为我提供了2个功能: 1-如果是从视图中检索数据,则应将列映射到现有表,并且2-当数据是来自表时,应在APDW中生成一个表对象。

实际上,这太昂贵了,难以维护,并且可能将源数据错误地映射到着陆区。

我想实现的是一种使用变量来命名架构,客户代码和表的算法方法。

到达源数据后,我将使用我们的SSIS集成运行时对其进行转换。 我也想知道SSIS包是否可以请求源数据而不是ADF管道。

  1. 是否有通过SSIS对象连接到本地IR的资源?
  2. 是否可以修改ADF的JSON以为每个数据源动态生成模式?

1 个答案:

答案 0 :(得分:0)

对于问题2,是否可以修改ADF的JSON以为每个数据源动态生成模式:

您可以将生成表脚本放在precopyscript中。