scala 2.10.4到2.11的火花

我需要使用SparkSQL和超過22列的表。scala 2.10.4到2.11的火花

Scala 2.11似乎解決了這個問題。

有關如何升級和可能的工作跨版本的任何幫助？我在eclipse中使用Scala IDE，但是由於SchemaRDD的問題，我可以轉向Intellij IDEA。

任何幫助表示讚賞。

2015-02-09 Irene

爲什麼不嘗試一下，看看是否有東西壞了？從2.10到2.11的變化相對較小。如果你使用的是SBT，這可能只是在你的構建文件中改變'scalaVersion'的值。如果您需要使用內置序列化功能讀取先前解組的序列化兼容性，則序列化兼容性會受到破壞。但是如果不知道你在項目中使用的所有庫和功能，其他任何人都無法爲你回答。 – acjay 2015-02-09 12:11:01

我真的不認爲Spark會與Scala 2.11一起工作。這就是爲什麼...... Spark團隊明確建議使用Scala 2.10。首先...你將需要編譯Spark對Scala 2.11 ...如果這個工程...（有一些奇蹟）..那麼你可以在你的Scala 2.11項目中使用它。 – 2015-02-09 14:17:53

在Spark building documentation中有關於用Scala 2.11構建Spark的部分。但是，該指令可能會錯過一步 - 請看another StackOverflow question。

無論如何，根據文檔的Scala 2.11尚不完全支持：

星火還不支持它的JDBC組件斯卡拉2.11。

來源

2015-11-04 13:23:30

scala 2.10.4到2.11的火花

回答

相關問題