Arenadata Hyperwave 4.3.0: поддержка геоданных, новые механизмы безопасности

Группа Arenadata выпустила новую версию гибридной платформы данных Arenadata Hyperwave (ADH) — релиз 4.3.0

Ключевые изменения затронули аналитические возможности, безопасность кластеров и эксплуатационные характеристики платформы.

Главное нововведение — поддержка Apache Sedona, расширения для работы с геоданными в Spark3. Оно позволяет решать задачи пространственного анализа: определять вхождение объектов в заданную область, рассчитывать расстояния и маршруты, агрегировать данные по координатной сетке. Эти функции востребованы в логистике и транспортных системах, градостроительстве, экологическом мониторинге, картографических сервисах, ритейле и телеком-инфраструктуре.

Расширен блок безопасности. В веб-интерфейсе HUE реализована поддержка OpenBao/Vault для хранения чувствительных параметров конфигурации. Добавлена интеграция Spark Connect и многопользовательского шлюза Kyuubi с изоляцией пользователей и аутентификацией через LDAP и Kerberos; для Kyuubi также внедрена поддержка аутентификации SPNEGO.

Обновлены средства администрирования и отказоустойчивости. Добавлен компонент Trino History Server для постоянного хранения истории выполнения запросов в федеративном SQL-движке Trino. Для веб-интерфейса HUE реализован режим высокой доступности на базе HAProxy, обеспечивающего балансировку нагрузки между экземплярами сервиса и автоматическое переключение при сбоях.

Расширены возможности работы с хранилищами. Arenadata Hyperwave — универсальная платформа на основе open source и проприетарных компонентов для хранения, обработки и анализа данных любой структуры и объёма, поддерживающая паттерны от Data Lake до Lakehouse и Data Mesh. Продукт включён в единый реестр российских программ для ЭВМ и баз данных, а также в реестр системы сертификации средств защиты информации.

Источник: новости Аренадата