从scala 2.10.4到2.11的火花

Question

我需要使用超过22列宽的表来处理SparkSQL。

似乎Scala 2.11解决了这个问题。

有关如何升级和可能跨版本工作的任何帮助？ 我在eclipse中使用Scala IDE，但由于SchemaRDD的问题，我可以转向Intellij IDEA。

感谢任何帮助。

Answer 1

在Spark building documentation中有关于使用Scala 2.11构建Spark的部分。但是，该指令可能会错过一步 - 请查看another StackOverflow question。

无论如何，根据文档，Scala 2.11尚未得到完全支持：

  

Spark尚不支持Scala 2.11的JDBC组件。