安装sql-spark-connector库到Azure Synapse Apache Spark

Question

我正在尝试为SQL Server和Azure SQL安装Apache Spark Connector，以便在大数据分析中使用事务性数据，并为临时查询或报告持久化结果。连接器允许您使用任何SQL数据库(本地或云中)作为Spark作业的输入数据源或输出数据接收器。

spark sql连接器位于这里https://github.com/microsoft/sql-spark-connector

有人能让我知道如何导入它在Azure Synapse Apache Spark?

Answer 1

根据与Synapse产品组的对话:

您不需要将连接器Apache Spark连接器jar文件或任何包com.microsoft.sqlserver.jdbc.spark添加到Synapse Spark池。连接器是现成的Spark 2.4和Spark 3.1它很可能会在接下来的几周内投入生产.

更多细节，请参考Microsoft Q&A解决类似问题的线程。