Что нового в Spark?
Что нового в Spark?

Видео: Что нового в Spark?

Видео: Что нового в Spark?
Видео: Король Бюджетного Авто Chevrolet Spark 2 Ждем В СНГ ! Chevrolet Onyx Уже в Ташкенте ! 2024, Ноябрь
Anonim

Помимо исправлений ошибок, есть 2 новый особенности в Искра 2.4: ИСКРА -22239 Пользовательские оконные функции с Pandas UDF. ИСКРА -22274 Пользовательские функции агрегирования с pandas udf. Мы верим этим новый функции улучшат принятие Pandas UDF, и мы продолжим улучшать Pandas UDF в следующих выпусках.

Точно так же какая последняя версия Spark?

История

Версия Исходная дата выпуска Последняя версия
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Легенда: Старая версия Старая версия, все еще поддерживается Последняя версия Последняя предварительная версия

Кроме того, соответствует ли Spark SQL ANSI? По состоянию на Искра 2.0, Искра является ANSI SQL :2003 послушный , что значит Spark SQL поддерживает SQL операции, недоступные в других диалектах.

Здесь, поддерживает ли Spark Java 11?

Scala и Джава пользователи могут включать Искра в своих проектах, используя его координаты Maven, и пользователи Python могут установить Искра из PyPI. Искра работает на Джава 8/ 11 , Scala 2.12, Python 2.7 + / 3.4 + и R 3.1+.

Обновляется ли поддержка Spark SQL?

2 ответа. Spark SQL не поддержка ОБНОВЛЕНИЕ заявлений пока нет. Улей начался поддержка ОБНОВЛЕНИЯ начиная с версии улья 0.14. Но даже с Hive он поддерживает обновления / удаляет только те таблицы, которые служба поддержки транзакции, это упоминается в документации улья.

Рекомендуемые: