是否可以在Hadoop中从同一个reducer写入HBase和多个文件



我们需要能够将map/reduce的输出写入多个文件(已经工作)以及HBase表。这可能吗?我一直在研究MultipleOutputs选项,但我不知道如何做到这一点,也不知道它是否可行。我对haddop很陌生。如果有人知道网上有什么例子,你能给我指正确的方向吗?非常感谢。

我个人还没有尝试过,但API的MultipleOutputs确实支持它。因为您为每个命名输出独立配置输出键/值类,所以您可以有一个(或多个)*FileOutputFormat和一个TableOutputFormat

相关内容

  • 没有找到相关文章

最新更新