减速器数量的逻辑



假设在一个MR作业中,映射器只给出两个唯一的键。我正在将减少器计数设置为4。现在,我的hashpartitioner总是将两种类型的密钥发送到两个reducer,假设R1和R2。我想知道R3和R4会发生什么他们在跑吗?如果没有,为什么?还要形成多少个零件文件

感谢

它们将运行,因为它们将在知道不会收到任何密钥之前启动。将创建四部分文件,但其中两部分不包含任何记录。

相关内容

  • 没有找到相关文章

最新更新