¿Qué hay de nuevo en Spark?
¿Qué hay de nuevo en Spark?

Video: ¿Qué hay de nuevo en Spark?

Video: ¿Qué hay de nuevo en Spark?
Video: ¿Por qué dejaron de venderse Chevrolet BEAT y SPARK? | Rodrigo de Motoren 2024, Mayo
Anonim

Aparte de las correcciones de errores, hay 2 nuevo características en Chispa - chispear 2.4: CHISPA - CHISPEAR -22239 Funciones de ventana definidas por el usuario con Pandas UDF. CHISPA - CHISPEAR -22274 Funciones de agregación definidas por el usuario con pandas udf. Creemos en estos nuevo Las características mejorarán aún más la adopción de Pandas UDF, y seguiremos mejorando Pandas UDF en las próximas versiones.

Asimismo, ¿cuál es la última versión de Spark?

Historia

Versión Fecha de lanzamiento original Ultima versión
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Leyenda: Versión anterior Versión anterior, aún mantenida Versión más reciente Versión de vista previa más reciente

Además de arriba, ¿Spark SQL cumple con ANSI? A partir de Chispa - chispear 2.0, Chispa - chispear es ANSI SQL :2003 obediente , lo que significa Spark SQL apoyos SQL operaciones que no están disponibles en otros dialectos.

Aquí, ¿Spark es compatible con Java 11?

Scala y Java los usuarios pueden incluir Chispa - chispear en sus proyectos utilizando sus coordenadas Maven y los usuarios de Python pueden instalar Chispa - chispear de PyPI. Chispa - chispear se ejecuta en Java 8/ 11 , Scala 2.12, Python 2.7 + / 3.4 + y R 3.1+.

¿Spark SQL admite la actualización?

2 respuestas. Spark SQL no soporte ACTUALIZACIÓN declaraciones todavía. Hive ha comenzado apoyando ACTUALIZACIÓN desde la versión 0.14 de la colmena. Pero incluso con Hive, admite actualizaciones / elimina solo en aquellas tablas que apoyo transacciones, se menciona en la documentación de la colmena.

Recomendado: