gpt4 book ai didi

hadoop - 有没有办法在 Hadoop 中终止 reducer 任务?

转载 作者:可可西里 更新时间:2023-11-01 14:16:16 24 4
gpt4 key购买 nike

运行几个 map reduce 作业,一个作业接管了所有的 reducer 容量。有没有办法杀死一两个 reducer 任务来释放集群?

我可以直接转到任务跟踪器服务器之一并手动终止 java 进程。但我想知道是否有更体面的方法来做到这一点?

最佳答案

您可以通过以下方式终止任务尝试:

hadoop job -kill-task [task_attempt_id]

要获取任务尝试 ID,您需要更深入地了解任务(通过单击作业跟踪器上的任务超链接)。

关于hadoop - 有没有办法在 Hadoop 中终止 reducer 任务?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/19435725/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com