在多节点模式下安装了 apache spark.现在,如果我安装yarn作为我的集群管理器,那么我已经安装了Spark,



新的火花。在多节点模式下安装了 apache spark。现在,如果我安装纱线作为我的集群管理器,如何处理,因为我已经安装了 Spark。此外,现在默认情况下如何将我的任务分配给不同的工作人员?

安装Yarn 不依赖于 Spark 安装。Yarn 只是一个集群管理器。提交 jar 时,您应该将 --master 指定为 yarn。

请参阅以下文档。

https://spark.apache.org/docs/latest/submitting-applications.html

最新更新