Мероприятия
Запись

Возможности легковесных кластеров Apache Spark в Yandex Data Proc

1 декабря 2022 г. в 12:00Online
  • Data Proc

Запись

О мероприятии

Технологии Apache Spark применяются для пакетной обработки данных и позволяют реализовать самые сложные сценарии. При этом нагрузка часто бывает непостоянной и требует больше вычислительных мощностей на ограниченных промежутках времени.

Обновлённый сервис Yandex Data Prос, где вы можете развернуть кластеры Apache Spark, позволяет эффективно использовать возможности Yandex Cloud и гибко управлять вычислительными ресурсами. Можно одновременно достичь высокой производительности в пиковые периоды и экономить затраты во время простоя.

На вебинаре мы рассказали, как использовать возможности легковесных и временных кластеров Apache Spark в Yandex Data Proc для гибкого управления ресурсами. Показали, как организовать хранение данных в S3 и преобразовывать их с помощью SQL-запросов. Поделились планами и направлениями развития сервиса.

Встреча будет полезна инженерам, архитекторам и разработчикам.