/ / spark da scala 2.10.4 a 2.11 - scala, eclipse-plugin, apache-spark, apache-spark-sql

scintilla da scala 2.10.4 a 2.11 - scala, eclipse-plugin, apache-spark, apache-spark-sql

Ho bisogno di lavorare con SparkSQL con tabelle che sono più di 22 colonne di larghezza.

Sembra che Scala 2.11 risolva il problema.

Qualche aiuto su come aggiornare e possibilmente funzionanti versioni incrociate? Sto usando l'IDE di Scala in Eclipse, ma a causa di problemi con SchemaRDD, ho intenzione di passare a Intellij IDEA.

Qualsiasi aiuto è apprezzato.

risposte:

1 per risposta № 1

In Documentazione per la costruzione di scintille c'è la sezione sulla costruzione di Spark con Scala 2.11. Tuttavia, l'istruzione può saltare un passaggio - guarda un'altra domanda StackOverflow.

Ad ogni modo, secondo la documentazione di Scala 2.11 non è ancora completamente supportato:

Spark non supporta ancora il suo componente JDBC per Scala 2.11.