Hadoop mapper阶段在19%之后卡住,在这种情况下,这种可能性会发生



我的MapReduce程序与其他MR代码运行良好。代码中没有错误。但它还是卡住了。

15/05/28 19:53:29 INFO input.FileInputFormat: Total input paths to process : 1
15/05/28 19:53:31 INFO mapred.JobClient: Running job: job_201504101709_0927
15/05/28 19:53:32 INFO mapred.JobClient:  map 0% reduce 0%
15/05/28 19:53:46 INFO mapred.JobClient:  map 19% reduce 0%
15/05/28 20:03:50 INFO mapred.JobClient:  map 0% reduce 0%
15/05/28 20:03:51 INFO mapred.JobClient: Task Id : attempt_201504101709_0927_m_000000_0, Status : FAILED
Task attempt_201504101709_0927_m_000000_0 failed to report status for 602 seconds. Killing!

可能的原因可能是Mapper中的一个bug,比如无限循环。检查Mapper中是否一切正常。如果你觉得没有问题,用你的mapper代码更新你的问题

最新更新