gpt4 book ai didi

hadoop - 当 NameNode 宕机时,hadoop 作业会发生什么?

转载 作者:可可西里 更新时间:2023-11-01 16:47:09 26 4
gpt4 key购买 nike

在Hadoop 1.2.1中,我想对以下这些问题有一些基本的了解

  1. 谁接收 hadoop 作业?是 NameNode 还是 JobTracker?

  2. 如果有人在 NameNode 宕机时提交 Hadoop 作业会发生什么情况?hadoop 作业会失败吗?还是进入 Hold 状态?

  3. 如果有人在 JobTracker 宕机时提交 Hadoop 作业,会发生什么情况? hadoop 作业是否失败?还是进入 Hold 状态?

最佳答案

对于 Hadoop 作业,您可能指的是 MapReduce 作业。如果您的 NN 出现故障,并且您没有备用的(在 HA 设置中),您的 HDFS 将无法工作,并且依赖于此 HDFS namespace 的每个组件都将被卡住或崩溃。

1) JobTracker(带有 hadoop 2.x 的 yarn 资源管理器)

2) 我不完全确定,但可能作业会提交并之后失败

3) 您不能将作业提交到已停止的 JobTracker。

关于hadoop - 当 NameNode 宕机时,hadoop 作业会发生什么?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/36091380/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com