gpt4 book ai didi

hadoop - 在每个应用程序上重新读取哪些 YARN 配置参数?

转载 作者:可可西里 更新时间:2023-11-01 16:40:28 25 4
gpt4 key购买 nike

我有一份工作比我日常工作流程中运行的其他 50 份左右的工作要大得多。我希望属性 yarn.app.mapreduce.am.resource.mb 更大一些,以便完成大工作。我运气好吗?我如何知道哪些属性需要完全重启集群中的哪些 YARN 片段才能更改?

最佳答案

无需重启 YARN 服务即可在作业级别更改此设置。一般很难说什么时候可以更改每个 MR 属性。通常可以在作业级别更新作业级别的属性,如 mapper/reducer/appmaster 内存设置。

可以查看this helpful post以更深入地了解这个主题。

关于hadoop - 在每个应用程序上重新读取哪些 YARN 配置参数?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/41904445/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com