Azure数据工厂 - Python自定义活动

Question

我正在尝试使用Python自定义活动（类似于.Net）创建数据工厂，以从源文件中提取数据并对其进行一些预处理。数据预处理后，需要将文件上传到blob。我有一个python代码准备这样做，但想探索我是否可以使用Data Factory Custom Activity通过将Python代码注入其中来实现这一点。如果是，请告诉我如何操作，链接或任何参考文档都会有所帮助。

感谢您对此的想法/想法。

Answer 1

依赖性应安装在批处理池（由定制活动引用）级别上。有两种方法可以在批处理池上安装依赖项：使用池启动脚本docs.microsoft.com/en-us/azure/batch/…或自定义映像docs.microsoft.com/en-us/azure/batch/batch-custom -图像

Answer 2

您可以使用ADF V2自定义活动，这是文档https://docs.microsoft.com/en-us/azure/data-factory/transform-data-using-dotnet-custom-activity