apache-spark - 如何在 NEW SAVING 状态下强制杀死 YARN 应用程序？

Question

我一直在使用命令 yarn application -kill <app_id> 杀死 yarn 应用程序.
我提交了一个当前处于 NEW_SAVING 状态的作业，我想终止它。

当我尝试 yarn application -kill 时，我不断收到以下消息

INFO impl.YarnClientImpl: Waiting for application application_XXXX_XXXX to be killed.

知道如何强行杀死它吗？

Answer 1

“yarn application -list”的输出包含以下yarn应用的信息:

应用程序 ID

应用名称

应用类型

用户

队列

国家

最终状态

进度

跟踪网址

您可以通过所需的参数列出应用程序和 awk。例如:按“应用程序名称”列出应用程序

yarn 应用-列表| awk '$6 == "NEW_SAVING"{ 打印 $1 }' > applications_list.txt

然后你可以遍历文件并杀死应用程序，如下所示:
while read p; do
echo $p
yarn application -kill $p
done <applications_list.txt