分析MapReduce作业

Question

我使用oozie工作流在CDH5上的分布式集群上启动多个mapreduce作业。

想知道是否有人可以推荐任何评测器。我在看HPROF和jumbune。有什么想法吗？

Answer 1

一种可能性是使用内置计数器来计时关键部分：

long start = Time.now();
codeToTime();
long timeElapsed = Time.now() - start;
reporter.incrCounter("performance", "codeWeTimed", timeElapsed);