Hvad er nyt i Spark?
Hvad er nyt i Spark?

Video: Hvad er nyt i Spark?

Video: Hvad er nyt i Spark?
Video: Hvad er SPARK? 2024, November
Anonim

Ud over fejlrettelser er der 2 ny funktioner i Gnist 2.4: GNIST -22239 Brugerdefinerede vinduesfunktioner med Pandas UDF. GNIST -22274 Brugerdefinerede aggregeringsfunktioner med pandas udf. Vi tror på disse ny funktioner vil yderligere forbedre adoptionen af Pandas UDF, og vi vil fortsætte med at forbedre Pandas UDF i næste udgivelser.

Ligeledes, hvad er den seneste version af Spark?

Historie

Version Original udgivelsesdato Nyeste version
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Forklaring: Gammel version Ældre version, stadig vedligeholdt Seneste version Seneste forhåndsvisningsversion

Ved siden af ovenstående, er spark SQL ANSI kompatibel? Fra Gnist 2.0, Gnist er ANSI SQL :2003 kompatibel , hvilket betyder Spark SQL bakker op SQL operationer, der ikke er tilgængelige på andre dialekter.

Heri, understøtter spark Java 11?

Scala og Java brugere kan inkludere Gnist i deres projekter ved hjælp af dets Maven-koordinater og Python-brugere kan installere Gnist fra PyPI. Gnist kører videre Java 8/ 11 , Scala 2.12, Python 2.7+/3.4+ og R 3.1+.

Opdateres spark SQL-understøttelse?

2 svar. Spark SQL gør ikke support OPDATERING udsagn endnu. Hive er startet understøtter OPDATERING siden hive version 0.14. Men selv med Hive, det understøtter opdateringer /sletter kun på de tabeller, der support transaktioner, er det nævnt i bikubedokumentationen.

Anbefalede: