实例运行时是否可以修改AWS Glue脚本

时间:2019-03-29 19:08:19

标签: aws-glue

这是我无法找到答案的一般性问题。

  1. 运行实例ID时是否可以修改AWS Glue脚本。
  2. 脚本的编辑会影响第一个实例的执行。就像,第一个实例将继续执行旧代码的副本吗?还是第一个实例将使用新版本的代码。

当多个开发人员共享一个胶粘作业来执行其脚本时,就会发生此问题。

1 个答案:

答案 0 :(得分:1)

运行Glue ETL作业时,它将以指定的顺序执行以下操作

  1. 在后端启动请求数量的DPU
  2. 从S3路径下载ETL脚本。
  3. 使用spark-submit命令在Spark环境中执行ETL脚本

因此,回答您的问题,

  1. 是的,您可以在作业执行JobRun时编辑Glue作业的脚本
  2. 不,它不会影响已经运行的作业实例的执行