我想知道是否有任何方法可以在作业的Map阶段关闭洗牌/排序?我的工作不需要Reduce阶段,所以我不需要洗牌和排序。
我使用hadoop 2.2.0版本
谢谢
您可以将numreducetask设置为0,这将只映射数据而不进行洗牌和排序。
我想知道是否有任何方法可以在作业的Map阶段关闭洗牌/排序?我的工作不需要Reduce阶段,所以我不需要洗牌和排序。
我使用hadoop 2.2.0版本
谢谢
您可以将numreducetask设置为0,这将只映射数据而不进行洗牌和排序。
javascript python java c# php android html jquery c++ css ios sql mysql arrays asp.net json python-3.x ruby-on-rails .net sql-server django objective-c excel regex ruby linux ajax iphone xml vba spring asp.net-mvc database wordpress string postgresql wpf windows xcode bash git oracle list vb.net multithreading eclipse algorithm macos powershell visual-studio image forms numpy scala function api selenium