如何在apacheyarn中调试作业失败

Question

我有hadoop apache yarn（2.4.0）多节点集群，有2个数据节点和1个主节点。我的设置很好，但当我运行包中的hadoop单词计数示例时。我的工作在14/08/28 15:44:13 INFO mapreduce.Job: Running job: job_1409220779657_0001如何调试有关此的问题。。。这背后的错误是什么。。。注意：我使用下面的命令来运行单词计数示例

bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.4.0.jar wordcount /input /output

机器：Ubuntu服务器14.04

Answer 1

Hortonworks有一篇关于在YARN下登录的好文章，网址是：http://hortonworks.com/blog/simplifying-user-logs-management-and-access-in-yarn/

如果您在yarn-site.xml中将yarn.log aggregation enable设置为true，那么您可以通过运行来检索应用程序的所有相关日志

yarn logs -applicationId <application ID>

（注意：应用程序ID将与作业ID匹配，因此您将使用application_1409220779557_0001）