在每个应用程序上重新读取哪些 YARN 配置参数

Question

我有一份工作比常工作流程中运行的其他 50 份左右的工作大得多。 我希望物业yarn.app.mapreduce.am.resource.mb更大，只是为了大工作。 我运气好吗？ 如何判断哪些属性需要完全重新启动群集中的哪些 YARN 片段才能更改？

Answer 1

可以在作业级别更改此设置，而无需重新启动 YARN 服务。一般来说，很难判断何时可以更改每个 MR 属性。通常，作业级别属性（如映射器/化简器/应用程序主内存设置）可以在作业级别更新。

您可以查看这篇有用的帖子以更深入地了解此主题。