将MapReduce结果与数据相结合



我如何与映射/减少这两个文件结合:

文件1.数据

1   name:foo1,position:bar1
2   name:foo2,position:bar2
3   name:foo3,position:bar3
4   name:foo4,position:bar4
5   name:foo5,position:bar5

文件2.MR计算结果

1   1,2
3   3,4,5

目标是:

1   foo1,foo2
3   foo3,foo4,foo5

这看起来像是一个连接,这肯定是可行的,但在直映射减少中有点麻烦。你有没有看过像Pig或Hive这样的高级语言来简化这项任务?

相关内容

  • 没有找到相关文章

最新更新