星火从等级2.10.4上升到2.11

Question

我需要使用SparkSQL处理超过22列宽的表。

Scala 2.11似乎解决了这个问题。

有关于如何升级和可能跨版本工作的帮助吗？我在eclipse中使用Scala IDE，但由于SchemaRDD的问题，我可以转到Intellij IDEA。

感谢您的帮助。

Answer 1

在Spark构建文档中有一节是关于用Scala 2.11构建Spark的。然而，该指令可能会错过一个步骤——看看另一个StackOverflow问题。

无论如何，根据文档Scala2.11还没有得到完全支持：

Spark还不支持Scala2.11的JDBC组件。