我试图在azure数据块中同时调用多个笔记本到另一个笔记本。
我用dbutils.notebook.run方法调用了scala程序中的其他笔记本。
根据情况,应调用相应的笔记本。我可以打电话,但他们一个接一个地运行,而不是同时运行。
我知道我可以使用多处理器/线程池来实现这一点,但我不知道如何实现。请建议
Databricks提供了关于如何并行运行笔记本电脑的高级示例
下载.dbc
并将其导入您的工作区。
还有新的任务编排,它可以帮助实现简单的流程。