
PreviewYandex Query
Интерактивный сервис виртуализации данных для инженеров и аналитиков, который позволяет выполнять аналитические и потоковые запросы в режиме реального времени к структурированным и частично структурированным данным с помощью YQL — диалекта SQL.
Сервис поможет упростить разработку за счёт бессерверных вычислений, единого формата запросов YQL и общих подходов к аналитике и потоковой обработке данных.
Сервис находится на стадии Preview и не тарифицируется.
Единый диалект запросов
Особенностью Yandex Query является единый формат запроса в YQL — это диалект SQL, который используется как для потоковой, так и для аналитической обработки.
Потоковая обработка данных
Потоковая обработка основана на группирующих оконных функциях, которые получают потоки данных, группируют их по источникам и временным окнам, после чего выполняют расчёты, а результаты исполнения отправляют во внешние системы.
Аналитические запросы к S3
С помощью аналитических запросов в Yandex Query вы сможете получать данные из Yandex Object Storage в форматах JSON, CSV, TSV, Parquet и др.
Полностью управляемый сервис
Все необходимые ресурсы для исполнения запросов выделяются в момент их запуска и освобождаются после завершения, а сами запросы начинают исполняться сразу же.
Универсальные запросы
Используйте один и тот же разработанный запрос для сценариев аналитики данных, которые хранятся в Yandex Object Storage, и аналитики данных в режиме реального времени.
Интеграция с сервисами Yandex Cloud
Выполняйте запросы к объектному хранилищу Object Storage, потокам данных реального времени Data Streams и агрегируйте результаты выполнения запросов между этими системами.
С чего начать
Создайте подключение к источнику, укажите схему и выполняйте запросы.
Вопросы и ответы
Как работает Yandex Query?
Yandex Query объединяет возможности виртуализации данных и систему потоковой аналитики реального времени. Такая архитектура системы называется Unified Lambda. В модели Unified Lambda используется единый текст SQL-запроса для обработки потоковых данных и данных, хранимых в различных классах систем хранения.
Yandex Query объединяет возможности виртуализации данных и систему потоковой аналитики реального времени. Такая архитектура системы называется Unified Lambda. В модели Unified Lambda используется единый текст SQL-запроса для обработки потоковых данных и данных, хранимых в различных классах систем хранения.
Какие типы данных можно передавать с Yandex Query?
В Yandex Query Language поддерживаются следующие форматы данных:
- csv_with_names
- tsv_with_names
- json_list
- json_each_row
- raw
- json_each_row
- json_as_string
- parquet
В Yandex Query Language поддерживаются следующие форматы данных:
- csv_with_names
- tsv_with_names
- json_list
- json_each_row
- raw
- json_each_row
- json_as_string
- parquet
Начните пользоваться Yandex Query
Полезные ссылки
Debezium является зарегистрированным товарным знаком Red Hat, Inc в США и/или других странах.