在azure数据工厂中设置delta负载

Question

我有一个SQL数据库，我希望从中获取数据。在数据库中有一个名为last_update的列，其中包含有关上次更新行的信息。我第一次运行我的管道时，我希望它将所有内容从数据库复制到azure数据库。下次我只想复制自上次运行以来已更新的行。因此，我想复制last_update高于上次运行时间的所有内容。有没有办法在管道中使用有关上次运行时间的信息？有没有其他好方法来创造我想要的东西？

Answer 1

我认为你可以通过开发custom copy activity来做到这一点。您可以添加自己的转换/处理逻辑，并在管道中使用该活动。