从Eclipse在AWS-EMR上运行MapReduce作业



我在Eclipse中有WordCount MapReduce示例。我将其导出到Jar,并将其复制到S3。然后我在AWS-EMR上运行了它。成功。

然后,我读了这篇文章- http://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/emr-common-programming-sample.html它展示了如何使用AWS-EMR Api来运行MapReduce作业。它仍然假设你的MapReduce代码被打包在Jar中。

我想知道是否有一种方法可以直接在AWS-EMR上从Eclipse运行MapReduce代码,而不必将其导出到Jar。

我还没有找到这样做的方法(对于用Java编写的mapreduce作业)。我相信没有Eclipse实用程序或插件可以做到这一点。您可以编写某种类型的脚本,并将其合并到构建过程中,以将Jar推出到EMR集群。但是没有单一的实用程序/工具可以编译、捆绑、部署和执行您的mapreduce作业到EMR。

相关内容

  • 没有找到相关文章