Què hi ha de nou a Spark?
Què hi ha de nou a Spark?

Vídeo: Què hi ha de nou a Spark?

Vídeo: Què hi ha de nou a Spark?
Vídeo: Как проверить, пробитые свечи и бронепровода/How to check spark plugs and ignition wires 2024, Maig
Anonim

A part de les correccions d'errors, n'hi ha 2 nou característiques a Espurna 2.4: GUPILA -22239 Funcions de finestra definides per l'usuari amb Pandas UDF. GUPILA -22274 Funcions d'agregació definides per l'usuari amb pandas udf. Ens creiem aquests nou Les funcions milloraran encara més l'adopció de Pandas UDF, i seguirem millorant Pandas UDF en les properes versions.

De la mateixa manera, quina és l'última versió de Spark?

Història

Versió Data de llançament original Última versió
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Llegenda: versió antiga Versió anterior, encara es manté Darrera versió Darrera versió prèvia

Al costat de dalt, és compatible amb Spark SQL ANSI? Com de Espurna 2.0, Espurna és SQL ANSI :2003 conforme , que significa Spark SQL suports SQL operacions que no estan disponibles en altres dialectes.

Aquí, Spark és compatible amb Java 11?

Scala i Java els usuaris poden incloure Espurna en els seus projectes utilitzant les seves coordenades Maven i els usuaris de Python poden instal·lar Espurna de PyPI. Espurna corre Java 8/ 11 , Scala 2.12, Python 2.7+/3.4+ i R 3.1+.

S'actualitza el suport de Spark SQL?

2 respostes. Spark SQL no ho fa suport ACTUALITZACIÓ declaracions encara. El rusc ha començat suport a l'ACTUALITZACIÓ des de la versió de rusc 0.14. Però fins i tot amb Hive, això admet actualitzacions / elimina només en aquelles taules que suport transaccions, s'esmenta a la documentació del rusc.

Recomanat: