如何构建内置火花 0.8.0 的齐柏林飞艇 2.3.2



我想内置 spark 0.8.0 构建齐柏林飞艇 2.3.2,并在不设置SPARK_HOME的情况下针对不在本地运行的相同版本的 Spark 运行它,这样我就不需要在齐柏林飞艇节点中安装 SPARK。我已经尝试了文档中给出的构建选项 https://zeppelin.apache.org/docs/0.8.0/setup/basics/how_to_build.html 但它在尝试为 scala 2.10 构建时失败。

这在 0.8.0 版本中甚至可能吗?

因此,您可以使用 Spark 2.3.2 构建 0.8.1 快照。但是,如果不使用 SPARK_HOME 提供单独的 Spark 安装,则无法使用内置的 Spark 二进制文件连接到外部 Spark 节点。

你可以合并来自这个拉取请求的代码,然后 spark-2.3 配置文件将使用 spark 2.3.2 构建,并且不会因 scala 2.10 错误而失败。

或者等待 0.8.1(今天标记了第一个候选人!

最新更新