安装HDFS以便与没有YARN的SHARK一起使用



我正在尝试安装Apache Shark。其中一个要求是安装HDFS。我不想使用YARN或MESOS。我只想要HDFS。我的问题是:这是否意味着我只能安装2.x之前的hadoop发行版?如果有,是哪一个?

或者我可以使用Hadoop 2.4并以某种方式禁用YARN吗?我不知道该怎么做。我能找到的所有教程似乎都使用YARN。有没有人有任何建议如何使用HDFS只与2.x?如果我只想安装HDFS,我需要哪个hadoop发行版?

要使用shark,你需要安装:

  • HDFS存储数据
  • 蜂巢
  • Spark用于内存使用

Yarn不是必须的

最新更新