为单个MapReduce作业指定"mapreduce.jobtracker.hosts.filename"



一些节点已添加到集群中。我的 M/R 作业在任何一个上执行时都会失败。确切原因尚不清楚,需要几天时间才能找到解决方案,因此我正在寻找临时解决方法。

有没有办法在作业级别排除这些节点(mapreduce.jobtracker.hosts.exclude.filename(?
或者将旧的工作节点(mapreduce.jobtracker.hosts.filename(列入白名单?

您可以将以下属性设置为 2

<property>
<name>mapred.max.tracker.failures</name>
<value>2</value>
</property>

它将在这些节点上使作业 2 失败两次,并在其他地方继续

最新更新