从Databricks dbfs导出数据表到azure sql数据库



我对databricks很陌生,正在寻找一种从databricks黄金方案导出数据表到azure sql数据库的智能方法。我正在使用数据块作为azure资源组的一部分,但是我没有在同一资源组内的任何存储帐户中找到来自数据块的数据。这是否意味着它是物理存储在一个隐式的数据块存储帐户/数据湖?提前谢谢:-)

你在Databricks中看到的表可以将数据存储在Databricks工作区文件系统(DBFS)中,也可以存储在外部(例如数据湖,可能在不同的Azure资源组中)-参见这里:Databricks数据库和表

如果要将数据从Databricks写入Azure SQL,我建议使用Apache Spark连接器。

最新更新