如何在Windows计算机上设置Spark集群



我正试图在Windows机器上建立一个Spark集群
这里的方法是使用独立模式,对吧
不使用Mesos或YARN的具体缺点是什么?使用其中任何一种都会有多痛苦?有人在这里有经验吗?

FYI,我在用户组中得到了一个答案:https://groups.google.com/forum/#!主题/火花用户/SyBHQXBqIs

独立模式确实是可行的。Mesos在Windows和YARN下可能都不起作用。

请注意,YARN最终应该通过Hortonworks数据平台在Windows上工作(2.0测试版在YARN上,但目前仅在Linux上)。另一个潜在的途径是让它在Hadoop 1.1(Hortonworks Data Platform for Windows 1.1)上运行,但你让它在独立模式下运行的方法肯定是最容易实现的。

相关内容

  • 没有找到相关文章

最新更新