如何在集群中的每台机器上检索map和reduce中的指标

Question

我需要有集群的信息。实际上，我想检索集群中每台机器的指标。我想有指标(数字等)通过地图和减少后运行的工作。这可能吗?

Answer 1

Reporter正是用于这种操作。

一般情况下，您可以这样使用ToolRunner来接收map和reduce方法上的Reporter实例。

这个对象允许你的实例在集群的不同节点之间保持计数器和报告状态。