Quoi de neuf dans Spark ?
Quoi de neuf dans Spark ?

Vidéo: Quoi de neuf dans Spark ?

Vidéo: Quoi de neuf dans Spark ?
Vidéo: Apache Spark — Introduction | Julien Nauroy 2024, Novembre
Anonim

Outre les corrections de bugs, il y a 2 Nouveau fonctionnalités dans Étincelle 2.4: ÉTINCELLE -22239 Fonctions de fenêtre définies par l'utilisateur avec Pandas UDF. ÉTINCELLE -22274 Fonctions d'agrégation définies par l'utilisateur avec pandas udf. Nous croyons ces Nouveau fonctionnalités amélioreront encore l'adoption de Pandas UDF, et nous continuerons à améliorer Pandas UDF dans les prochaines versions.

De même, quelle est la dernière version de Spark ?

Histoire

Version Date de sortie d'origine Dernière version
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Légende: Ancienne version Ancienne version, toujours maintenue Dernière version Dernière version d'aperçu

À côté de ci-dessus, spark SQL est-il conforme à la norme ANSI ? À partir de Étincelle 2.0, Étincelle est ANSI SQL :2003 conforme , ce qui signifie Spark SQL les soutiens SQL opérations qui ne sont pas disponibles dans d'autres dialectes.

Ici, Spark prend-il en charge Java 11 ?

Scala et Java les utilisateurs peuvent inclure Étincelle dans leurs projets en utilisant ses coordonnées Maven et les utilisateurs Python peuvent installer Étincelle de PyPI. Étincelle fonctionne sur Java 8/ 11 , Scala 2.12, Python 2.7+/3.4+ et R 3.1+.

Spark SQL prend-il en charge la mise à jour ?

2 réponses. Spark SQL ne fait pas prise en charge MISE À JOUR déclarations encore. La ruche a commencé prise en charge de la MISE À JOUR depuis la version 0.14 de la ruche. Mais même avec Hive, il prend en charge les mises à jour /supprime uniquement sur les tables qui Support transactions, il est mentionné dans la documentation de la ruche.

Conseillé: