在没有 Spark 群集的情况下运行 Azure Databricks

Question

我已经使用Domino数据实验室一段时间了，我能够在不使用Spark的情况下用一台机器启动Python或R会话。

是否可以对 Azure 数据砖执行相同的操作？也就是说，在没有 Spark(和集群(的情况下使用 Python 启动笔记本会话？

Answer 1

始终必须有一个"群集"，但它可以是单节点群集(仅具有驱动程序节点(。将此配置的工作器节点数设置为零。无法在仅驱动程序群集上运行 Spark。请参阅以下示例在仅驱动程序群集上使用 MXNet。

2020 年 9 月平台版本中提供的另一个选项是单节点群集。 可以从群集模式中选择"单节点"，以创建在本地模式下运行 Spark 的单节点群集。

Answer 2

Databricks 现在在公共预览版中提供了单节点群集。