可以在实例运行时修改AWS Glue脚本

问题描述 投票:0回答:1

这是一个我无法找到答案的一般性问题。

  1. 可以在实例ID运行时修改AWS Glue脚本。
  2. 编辑脚本是否会影响第一个实例的执行。比如,第一个实例是否会继续执行旧代码的副本。或者第一个实例将使用新版本的代码。

当多个开发人员共享粘合作业以执行其脚本时,会发生此问题。

aws-glue
1个回答
1
投票

运行Glue ETL作业时,它将按指定的顺序执行以下操作

  1. 在后端启动请求的DPU数量
  2. 从S3路径下载ETL脚本。
  3. 使用spark-submit命令在Spark环境中执行ETL脚本

因此,回答你的问题,

  1. 是的,您可以在作业执行JobRun时编辑Glue作业的脚本
  2. 不,它不会影响已经运行的作业实例的执行
© www.soinside.com 2019 - 2024. All rights reserved.