gpt4 book ai didi

hadoop - hadoop中local和yarn的区别

转载 作者:可可西里 更新时间:2023-11-01 16:42:39 26 4
gpt4 key购买 nike

我一直在尝试按照 here 中的说明在单个节点上安装 Hadoop .有两组指令,一组用于在本地运行 MapReduce 作业,另一组用于 YARN。
在本地运行 MapReduce 作业和在 YARN 上运行有什么区别?

最佳答案

如果您使用本地,则 map 和 reduce 任务在同一个 jvm 中运行。通常我们要调试代码的时候会用到这种模式。而如果我们使用 MRV2 中的 yarn 资源管理器,mappers 和 reducers 将在不同的节点和不同的 jvms 中运行,并且在同一节点中运行(如果它是伪分布式模式)。

关于hadoop - hadoop中local和yarn的区别,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/39320639/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com