gpt4 book ai didi

hadoop - 特定的YARN节点未生成容器

转载 作者:行者123 更新时间:2023-12-02 21:27:48 29 4
gpt4 key购买 nike

在具有4个“从属”节点(DataNode和NodeManagers并置)的群集上运行Terasort。它会在所有其他节点上生成容器,但不会在一个节点上生成容器,如果这样做,则只会生成最多6-8个容器。

  • 2GB映射器
  • 4GB reducer
  • 48v核心
  • 每个节点180GB

  • 我发现特定节点的数据节点已停用,因此我对其进行了重新调试。除此之外,对于YARN RM为什么没有在该特定节点上生成容器,我无能为力。

    最佳答案

    找到了答案:

    重新使用的数据节点将无法在其上运行作业,因为由于手动的“数据节点目录”复制-粘贴过程,其中的块为“旧块”。在此处重新创建文件。

    关于hadoop - 特定的YARN节点未生成容器,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/35357226/

    29 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com