python - Boto:如何在完成/失败后保持 EMR 作业流程运行？

Question

如何使用 boto 向等待中的 Amazon EMR 作业流程添加步骤，而作业流程不会在完成后终止？

我在 Amazon 的 Elastic Map Reduce 上创建了一个交互式工作流程并加载了一些表格。当我使用 Boto 的 emr_conn.add_jobflow_steps(...) 将新步骤传递给作业流程时，作业流程在完成或失败后终止。

我知道我可以使用带有 keep_alive 参数的 run_jobflow 使用 boto 启动工作流——但我想使用已经在运行的流。

Answer 1

如果正确完成，它不应以 keep_alive=True 终止。也就是说，它通常会在失败时退出，因此您想将 terminate_on_failure="CONTINUE" 添加到您的 add_job_steps 参数中。