Quina versió de Python utilitza spark?
Quina versió de Python utilitza spark?

Vídeo: Quina versió de Python utilitza spark?

Vídeo: Quina versió de Python utilitza spark?
Vídeo: Become A Master Of SDXL Training With Kohya SS LoRAs - Combine Power Of Automatic1111 & SDXL LoRAs 2024, Desembre
Anonim

Espurna funciona amb Java 8+, Python 2,7+/3,4+ i R 3,1+. Per a l'API Scala, Espurna 2.3. 0 usos Scala 2.11. Necessitaràs utilitzar una Scala compatible versió (2.11.

En conseqüència, l'espurna funciona amb Python 3?

Apache Espurna és un marc informàtic de clúster, actualment un dels més desenvolupats activament en l'àmbit de Big Data de codi obert. Des de l'última versió 1.4 (juny de 2015), Espurna suporta R i Python 3 (per complementar el suport disponible anteriorment per a Java, Scala i Python 2).

Al costat de dalt, com puc canviar la versió d'espurna de Python? Per si només voleu canvi el versió python per a la tasca actual, podeu utilitzar la següent comanda d'inici de pyspark: PYSPARK_DRIVER_PYTHON=/home/user1/anaconda2/bin/ pitó PYSPARK_PYTHON=/usr/local/anaconda2/bin/ pitó pyspark --mestre..

A més, quina és l'última versió d'espurna?

Apache Spark

Autor(s) original(s) Matei Zaharia
versió inicial 26 de maig de 2014
Alliberament estable 2.4.5 / 8 de febrer de 2020
Repositori Repositori Spark
Escrit en Scala

Què és spark Python?

Dominar el Big Data amb Apache Espurna i Python Py4J és una biblioteca popularment integrada PySpark que permet pitó interfície dinàmicament amb objectes JVM (RDD). Apache Espurna ve amb un shell interactiu per pitó com passa amb Scala. La closca per pitó es coneix com PySpark ”.

Recomanat: