有没有一种方法可以通过查询Databricks DBFS或parquets.NET for Apache Spark



简而言之,我正试图探索将数据从Databricks工作区提供给C#/的可能性。NET应用程序,用于用户交互和特殊查询。我花了一些时间设置了Databricks Connect,它似乎可以在我的本地机器上在Databrickss集群上运行Python Spark作业。

我还尝试从中遍历设置并执行示例。NET用于Apache Spark

我的问题是,我很难找到任何涉及这两个协同工作的文档、示例或演示。是否可以在中设置火花会话。NET,允许对databricks集群中的数据执行spark sql?Databricks是否连接了适当的途径?

最重要的是,是否可以部署。NET应用程序到可以提供Databricks数据的Azure应用程序服务?

实现这一点的标准方法实际上是使用连接到现有集群或SQL Analytics的JDBC或ODBC——中应该支持它。Net框架的ADO。网它比建立数据块连接更容易使用,如果您使用SQL Analytics与用于数据块连接的交互式集群相比,它可能会更便宜。

最新更新