本地模式下的执行器数量以及客户端和集群模式之间的差异



我对Spark配置有一个非常简单的问题,是否在本地模式下,执行器的数量是1,因为只有一个工作节点?

我的另一个问题是部署模式作为客户端或集群模式之间的区别?文档中提到客户端模型,驱动启动在集群之外,我不能得到这个语句..

如果我没记错的话,在本地模式下只有一个执行器,如果你没有指定的话。

客户端模式和集群模式之间的区别主要在于驱动程序运行的位置。在客户机模式下,它在部署作业的机器上运行。在集群模式下,驱动程序将在集群中的某个节点上运行。因此,在客户端模式下,您可以轻松访问驱动程序输出到标准输出和标准错误的任何内容。

最新更新