在运行 Spark 作业时选择 JVM

Question

如何将java路径传递给spark-submit以选择非默认的JVM（不在JAVA_HOME中）？不允许在我的环境中设置任何环境变量。

Answer 1

http://spark.apache.org/docs/1.1.1/configuration.html

请参阅环境变量部分。

Answer 2

好的，似乎使用 SPARK_YARN_USER_ENV 是解决问题的方法之一。另外，似乎setExecutorEnv可以用于此目的，但我没有尝试。