在云平台上运行Hadoop

Question

请告诉我如何在Google Cloud、Ibm Cloud和Microsoft Cloud 上运行最大大小为1GB的wordcount和Terasort Mapreduce作业

Answer 1

1. 您可以登录到云-
2. 制作一个你的wordcount和Tera排序映射reduce程序的罐子，你可以使用eclipse
3. 使用任何像winscp这样的FTP软件，并将jar移动到云中。为此，您必须提供云的ip地址等等
4. 现在，您可以使用标准的hadoop-jar命令来运行jar。正常语法可以是

hadoop jar jar_name Package_name。Driver_Class_name Input_path_HDFS输出路径_hdfs

对于Terasart，请使用以下链接Michael Noll Terasort

我希望这会有所帮助。。