gpt4 book ai didi

performance - hadoop/YARN如何确定一个节点很慢,它对该节点的任务有何作用?

转载 作者:行者123 更新时间:2023-12-02 20:34:24 25 4
gpt4 key购买 nike

我相信我了解HADOOP如何知道某个节点已崩溃。如果群集管理器在预定的时间内没有收到任何一个从属设备发出的心跳,则表明它已死。

集群管理器如何确定节点是否慢?一旦确定该节点运行缓慢,它将如何处理该节点上的任务?

谢谢。

最佳答案

回答我自己的问题。我正在使用汤姆·怀特(Tom White)的以下引用“Hadoop: The Definitive Guide”。

哈罗德是正确的。根据这本书,由应用程序启动的任务会定期向应用程序母版报告状态。如果应用程序主管发现某个任务没有报告进度,则认为该任务已挂起并自动终止相应的JVM。默认超时时间为10分钟。

构成进步的是书中还包含了单独的讨论。

关于performance - hadoop/YARN如何确定一个节点很慢,它对该节点的任务有何作用?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/51810359/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com