多节点集群Hadoop安装



伪分布式单节点集群实现

我使用 windows7与CYGWIN和安装hadoop-1.0.3成功。我仍然在端口上启动服务作业跟踪器、任务跟踪器和namenode (localhost:50030、localhost:50060和localhost:50070)。我已经完成了单节点实现。

现在我想实现伪分布式多节点集群。我不明白如何通过网络ip划分主从系统?

对于您的ssh问题,请按照单节点集群的链接:

http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-single-node-cluster/

,是的,你需要在配置文件中指定主和从的ip地址你可以参考这个网址:http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-multi-node-cluster/

尝试创建要在集群中添加的虚拟机数量。确保这些虚拟机具有相同的hadoop版本。计算出每个虚拟机的ip地址。你会在$HADOOP_HOME/conf中找到名为master和slaves的文件,将虚拟机的IP提到你想要作为master的conf/master文件,并对conf/slaves文件做同样的处理

确保这些节点具有无密码ssh连接。格式化namenode,然后运行start-all.sh。

谢谢,

相关内容

  • 没有找到相关文章

最新更新