如何在Azure数据工厂自定义活动中加载python库？

Question

我了解您可以将具有自定义VM映像的批处理自定义活动与预加载的python库一起使用，以通过ADF运行python程序。

我们是否还可以使用普通的Linux VM映像并在自定义活动执行过程中加载python库？我知道这可能会增加执行时间，因为每次都必须安装库，但是我想了解它是如何完成的。解释/示例表示赞赏。

谢谢！

Answer 1

您可以使用Azure Batch start task有效地安装预定义的库。通过“自定义活动”针对同一个池提交的所有作业都可以访问它们。

或者，您可以通过对Linux池节点执行shell脚本来安装依赖库，该脚本将设置库，然后触发python代码。