Продуктовый дайджест Yandex Cloud (январь)

Сервис виртуализации данных для инженеров и аналитиков Yandex Query стал доступен всем пользователям Yandex Cloud. Теперь для него действуют правила тарификации и SLA. Yandex Query в режиме реального времени позволяет выполнять аналитические и потоковые запросы к полностью или частично структурированным данным с помощью YQL — диалекта SQL.

В общедоступной версии сервиса:

• оптимизировали скорость исполнения запросов;

• сняли ограничения в работе с данными в Object Storage;

• добавили возможность отправки федеративных запросов к БД Managed Service for PostgreSQL и Managed Service for ClickHouse;

• добавили возможность частичного переноса исполнения запросов в БД.

Что нового:

• обновили версию Yandex Managed Service for Greenplum до 6.25. Теперь по умолчанию доступны инструменты интеграции с холодным хранилищем и командный центр;

• добавили возможность самостоятельной настройки внешних источников PXF для работы с данными из других СУБД и S3 и мониторинга метрик сервиса. Раньше за настройкой PXF пользователям приходилось обращаться в поддержку.

С 1 марта 2024 года мы отключаем режим Serverless в Yandex DataSphere в связи ограничениями обновления системных образов и библиотек, времени запуска проекта и скорости начала вычислений. При этом режим Yandex DataSphere Dedicated остаётся доступным для пользователей.

Обновления сервиса:

• добавили новую и самую доступную конфигурацию с vCPU на платформе Intel Ice Lake и GPU NVIDIA^® Tesla^® T4 для запуска проектов;

• добавили новый тип нод из ресурса Модель. В этом ресурсе можно хранить результаты вычислений или обучения, полученные во время работы в Yandex DataSphere. Новая функциональность позволяет развернуть сохранённые в DataSphere модели в качестве сервиса и обращаться к ним по API.

В Data Transfer несколько изменений:

• добавили фильтр строк для источников, поставляющих данные append‑only. Теперь пользователи могут ограничить поток данных из источника в приёмник — отфильтровать события по конкретным значениям;

• добавили поддержку предсозданного потока изменений при репликации в приёмник YDB. Теперь пользователи смогут самостоятельно выставлять настройки консьюмера (читателя потока изменений) и запускать репликацию без выдачи прав на редактирование источника;

• реализовали настройку для параллельного копирования и репликации из источника YDB. Это ускорит перенос данных и сократит задержки;

• добавили порядок добавления view в сценарии миграции кластеров MySQL.

Yandex API GatewayYandex API Gateway

• Добавлена пошаговая инструкция по настройке переменных.

• Добавлена пошаговая инструкция по настройке канареечного релиза.

Yandex Application Load BalancerYandex Application Load Balancer

• Практическое руководство по терминированию TLS‑соединений дополнено конфигурационным файлом Terraform.

Yandex Cloud CDNYandex Cloud CDN

• Добавлена информация о защищённых токенах.

• Добавлены пошаговые инструкции по получению информации о ресурсе и источниках.

• Добавлена пошаговая инструкция по настройке доступа по защищённому токену.

• Добавлена пошаговая инструкция по просмотру статистики CDN‑ресурса.

• Добавлен Справочник метрик Monitoring.

• Обновлена информация о CDN‑ресурсе: добавлена инструкция по просмотру статистики работы ресурса.

Yandex Cloud LoggingYandex Cloud Logging

• Добавлены пошаговые инструкции по получению информации о лог‑группе и приёмнике логов.

• Добавлена пошаговая инструкция по получению списка приёмников логов.

Yandex Compute CloudYandex Compute Cloud

• Добавлены пошаговые инструкции по переносу виртуальной машины и диска в другую зону доступности.

• Добавлена пошаговая инструкция по настройке доступа через OS Login на существующей ВМ.

• Добавлена пошаговая инструкция по созданию виртуальной машины с OS Login.

• Добавлена пошаговая инструкция по экспорту сертификата OS Login.

• Добавлена пошаговая инструкция по обмену файлами с виртуальной машиной Linux.

• Обновлена пошаговая инструкция по изменению виртуальной машины: добавлена опция подключения к ВМ через OS Login.

• Обновлена пошаговая инструкция по изменению диска: добавлен способ увеличения диска с помощью Terraform.

Yandex Load TestingYandex Load Testing

• Добавлена информация о сравнении результатов нагрузочных тестов.

• Добавлены Результаты нагрузочного теста.

• Добавлено практическое руководство по сравнению результатов нагрузочных тестов.

• Добавлен Справочник API.

Yandex MonitoringYandex Monitoring

• Добавлена пошаговая инструкция по чтению и записи метрик кластера Yandex Managed Service for Kubernetes с помощью Prometheus Operator.

• Обновлён Справочник метрик.

Yandex Object StorageYandex Object Storage

• Добавлено практическое руководство по переносу данных в Yandex Managed Service for PostgreSQL с использованием Yandex Data Transfer.

• Добавлена пошаговая инструкция по просмотру метрик бакета.

• Добавлен Справочник метрик Monitoring.

• Обновлена информация о бакете: добавлена инструкция по просмотру статистики.

Yandex Virtual Private CloudYandex Virtual Private Cloud

• Обновлен раздел Квоты и лимиты.

Yandex Data ProcYandex Data Proc

• Добавлены ограничения на определённые классы хостов и типы дисков в зоне доступности ru‑central1‑d.

• Обновлено практическое руководство по запуску и управлению приложениями для Spark и PySpark.

Yandex Data TransferYandex Data Transfer

• Добавлено практическое руководство по миграции данных из Elasticsearch в Yandex Managed Service for OpenSearch.

• Добавлено практическое руководство по миграции данных из OpenSearch в Yandex Managed Service for OpenSearch.

• Добавлено практическое руководство по загрузке данных из Яндекс Директ в витрину Yandex Managed Service for ClickHouse^® с использованием Yandex Cloud Functions и Yandex Object Storage.

• Добавлено практическое руководство по переносу данных из Yandex Object Storage в Yandex Managed Service for PostgreSQL.

• Добавлено практическое руководство по миграции данных из Yandex Managed Service for MySQL в Yandex Managed Service for Greenplum^®.

• Добавлена «История изменений» за ноябрь и декабрь.

• Обновлена информация о трансформации данных: добавлен фильтр строк для APPEND‑ONLY источников и пример разделения на подтаблицы.

• Обновлена информация о параллельном копировании.

• Обновлена пошаговая инструкция по миграции эндпоинтов и трансфера Data Transfer в другую зону доступности.

• Обновлена пошаговая инструкция по передаче данных в эндпоинт‑приёмник Object Storage: добавлены расширенные настройки.

Yandex DataLensYandex DataLens

• Обновлена инструкция по созданию подключения к Google BigQuery.

• Обновлена инструкция по созданию партнёрского коннектора.

• Актуализированы правила публикации объектов.

• Добавлена инструкция по замене таблицы в датасете.

• Добавлена страница с рекомендациями по встраиванию объектов.

• Обновлена информация о необходимых доступах для создания подключения к Yandex Cloud Billing.

• Добавлена информация про миграцию в воркбуки с использованием копирования.

• Добавлено примечание про корректный формат запроса к Yandex Monitoring.

• На страницы с описанием селекторов и инструкцией по работе с ними добавлен новый вид селектора — чекбокс для работы с логическим типом данных.

Yandex DataSphereYandex DataSphere

• Добавлена информация о DataSphere CLI.

• Добавлена пошаговая инструкция по использованию ресурса с совместным доступом.

• Добавлена пошаговая инструкция по созданию ноды из модели.

Yandex Managed Service for ClickHouseYandex Managed Service for ClickHouse

• Добавлена информация о служебных пользователях в Managed Service for ClickHouse^®.

• Добавлено практическое руководство по загрузке данных из Яндекс Директ с использованием Yandex Cloud Functions, Yandex Object Storage и Yandex Data Transfer.

• Добавлены ограничения на определённые классы хостов и типы дисков в зоне доступности ru‑central1‑d.

• Обновлена информация о времени начала резервного копирования.

Yandex Managed Service for Greenplum^®Yandex Managed Service for Greenplum^®

• Добавлено практическое руководство по миграции данных из Yandex Managed Service for MySQL в Yandex Managed Service for Greenplum^® с помощью Yandex Data Transfer.

• Добавлены ограничения на определённые классы хостов и типы дисков в зоне доступности ru‑central1‑d.

• Обновлена информация о командном центре Greenplum^®.

• Обновлена информация о времени начала резервного копирования.

• Обновлена пошаговая инструкция по просмотру логов Greenplum^®‑кластера.

• Обновлена пошаговая инструкция по мониторингу и управлению сессиями и запросами в командном центре: добавлены примеры работы в командном центре.

• Обновлена пошаговая инструкция по управлению резервными копиями в Managed Service for Greenplum^®: добавлена информация о создании резервной копии.

Yandex Managed Service for MongoDBYandex Managed Service for MongoDB

• Добавлены ограничения на определенные классы хостов и типы дисков в зоне доступности ru‑central1‑d.

• Обновлена информация о времени начала резервного копирования.

Yandex Managed Service for MySQL^®Yandex Managed Service for MySQL^®

• Добавлено практическое руководство по миграции данных из Yandex Managed Service for MySQL в Yandex Managed Service for Greenplum^® с помощью Yandex Data Transfer.

• Добавлена пошаговая инструкция по обновлению версии MySQL.

• Добавлены ограничения на определённые классы хостов и типы дисков в зоне доступности ru‑central1‑d.

• Обновлена информация о времени начала резервного копирования.

Yandex Managed Service for OpenSearchYandex Managed Service for OpenSearch

• Добавлено практическое руководство по миграции данных из стороннего кластера OpenSearch с помощью Yandex Data Transfer.

• Добавлены ограничения на определённые классы хостов и типы дисков в зоне доступности ru‑central1‑d.

Yandex Managed Service for PostgreSQLYandex Managed Service for PostgreSQL

• Добавлено практическое руководство по настройке подключения из контейнера Serverless Containers.

• Добавлено практическое руководство по переносу данных из Yandex Object Storage с использованием Yandex Data Transfer.

• Добавлены ограничения на определённые классы хостов и типы дисков в зоне доступности ru‑central1‑d.

• Обновлена информация о времени начала резервного копирования.

• Обновлена пошаговая инструкция по управлению базами данных в Managed Service for PostgreSQL: добавлена информация о переименовании базы данных.

Yandex Managed Service for RedisYandex Managed Service for Redis

• Добавлены ограничения на определённые классы хостов и типы дисков в зоне доступности ru‑central1‑d.

• Обновлена информация о репликации и отказоустойчивости.

Yandex MonitoringYandex Monitoring

• Добавлена пошаговая инструкция по чтению и записи метрик кластера Yandex Managed Service for Kubernetes с помощью Prometheus Operator.

• Обновлён Справочник метрик.

Yandex Object StorageYandex Object Storage

• Добавлено практическое руководство по переносу данных в Yandex Managed Service for PostgreSQL с использованием Yandex Data Transfer.

• Добавлена пошаговая инструкция по просмотру метрик бакета.

• Добавлен Справочник метрик Monitoring.

• Обновлена информация о бакете: добавлена инструкция по просмотру статистики.

Yandex QueryYandex Query

• Добавлен раздел Правила тарификации.

Yandex WebSQLYandex WebSQL

• Добавлена «История изменений» за январь.

• Обновлена пошаговая инструкция по работе с сохраненными SQL‑запросами.

• Обновлена пошаговая инструкция по выполнению SQL‑запросов: добавлена информация о выгрузке результатов выполнения запросов и настройке редактора запросов.

• Обновлена пошаговая инструкция по управлению подключениями с базами данных.

Yandex Container RegistryYandex Container Registry

• Добавлена пошаговая инструкция по получению информации о политике доступа к реестру.

Yandex Managed Service for KubernetesYandex Managed Service for Kubernetes

• Добавлено практическое руководство по миграции ресурсов Managed Service for Kubernetes в другую зону доступности.

• Добавлено практическое руководство по использованию продукта Istio.

• Добавлен Справочник метрик Monitoring.

Yandex Serverless ContainersYandex Serverless Containers

• Добавлено практическое руководство по настройке подключения к Yandex Managed Service for PostgreSQL из контейнера Serverless Containers.

• Добавлена пошаговая инструкция по активации ревизии.

• Обновлена пошаговая инструкция по передаче секретов Yandex Lockbox в контейнер.

• Добавлены пошаговые инструкции по созданию таймера, триггера для Message Queue, Object Storage, Cloud Logging и Yandex IoT Core с помощью Terraform.

Yandex Load TestingYandex Load Testing

• Добавлена информация о сравнении результатов нагрузочных тестов.

• Добавлены Результаты нагрузочного теста.

• Добавлено практическое руководство по сравнению результатов нагрузочных тестов.

• Добавлен Справочник API.

Yandex Managed Service for GitLabYandex Managed Service for GitLab

• Добавлена информация о порядке предоставления услуги по миграции из GitLab в Managed Service for GitLab.

• Добавлена пошаговая инструкция по миграции из GitLab в Managed Service for GitLab.

• Добавлена пошаговая инструкция по настройке групп безопасности и ограничению доступа к инстансу Managed Service for GitLab.

• Обновлён раздел Правила тарификации: добавлен пример расчёта стоимости инстанса.

• Обновлён раздел Вопросы и ответы: добавлена информация по переносу данных из GitLab в Managed Service for GitLab.

Yandex SmartCaptchaYandex SmartCaptcha

• Добавлена информация о валидации домена.

Yandex WebSQLYandex WebSQL

• Добавлена «История изменений» за январь.

• Обновлена пошаговая инструкция по работе с сохранёнными SQL‑запросами.

• Обновлена пошаговая инструкция по выполнению SQL‑запросов: добавлена информация о выгрузке результатов выполнения запросов и настройке редактора запросов.

• Обновлена пошаговая инструкция по управлению подключениями с базами данных.

Yandex API GatewayYandex API Gateway

• Добавлена пошаговая инструкция по настройке переменных.

• Добавлена пошаговая инструкция по настройке канареечного релиза.

Yandex Cloud FunctionsYandex Cloud Functions

• Обновлена информация об окружении: добавлен сертификат для доступа к управляемым базам данных.

• Обновлена пошаговая инструкция по передаче секретов Yandex Lockbox в функцию.

Yandex Cloud PostboxYandex Cloud Postbox

• Добавлен раздел Управление доступом.

• Обновлена информация о начале работы с Yandex Cloud Postbox.

Yandex Object StorageYandex Object Storage

• Добавлено практическое руководство по переносу данных в Yandex Managed Service for PostgreSQL с использованием Yandex Data Transfer.

• Добавлена пошаговая инструкция по просмотру метрик бакета.

• Добавлен Справочник метрик Monitoring.

• Обновлена информация о бакете: добавлена инструкция по просмотру статистики.

Yandex QueryYandex Query

• Добавлен раздел Правила тарификации.

Yandex Serverless ContainersYandex Serverless Containers

• Добавлено практическое руководство по настройке подключения к Yandex Managed Service for PostgreSQL из контейнера Serverless Containers.

• Добавлена пошаговая инструкция по активации ревизии.

• Обновлена пошаговая инструкция по передаче секретов Yandex Lockbox в контейнер.

• Добавлены пошаговые инструкции по созданию таймера, триггера для Message Queue, Object Storage, Cloud Logging и Yandex IoT Core с помощью Terraform.

Yandex Identity and Access ManagementYandex Identity and Access Management

• Обновлён раздел Роли.

Yandex LockboxYandex Lockbox

• Обновлена инструкция по получению содержимого секрета с помощью CLI.

Yandex SmartCaptchaYandex SmartCaptcha

• Добавлена информация о валидации домена.

Yandex Cloud BillingYandex Cloud Billing

• Обновлена информация об уровне нетарифицируемого использования (free tier) для сервисов экосистемы бессерверных вычислений: добавлены примеры расчётов с применением free tier.

• Обновлён раздел Управление доступом: добавлена роль billing.accounts.accountant.

• Обновлён раздел Вопросы и ответы: добавлена инструкция по добавлению расчётного счёта.

Yandex Cloud LoggingYandex Cloud Logging

• Добавлены пошаговые инструкции по получению информации о лог‑группе и приемнике логов.

• Добавлена пошаговая инструкция по получению списка приёмников логов.

Yandex Cloud OrganizationYandex Cloud Organization

• Добавлены пошаговые инструкции по управлению доступом в Yandex Cloud Organization.

• Добавлены пошаговые инструкции по управлению организациями в Yandex Cloud Organization.

• Обновлена пошаговая инструкция по удалению аккаунта пользователя: добавлена информация об исключении и удалении пользователя из организации.

Yandex Identity and Access ManagementYandex Identity and Access Management

• Обновлён раздел Роли.

Yandex MonitoringYandex Monitoring

• Добавлена пошаговая инструкция по чтению и записи метрик кластера Yandex Managed Service for Kubernetes с помощью Prometheus Operator.

• Обновлён Справочник метрик.

Yandex Resource ManagerYandex Resource Manager

• Обновлена пошаговая инструкции по удалению каталога: добавлен способ выполнения действий с помощью CLI.

Yandex DataSphereYandex DataSphere

• Добавлена информация о DataSphere CLI.

• Добавлена пошаговая инструкция по использованию ресурса с совместным доступом.

• Добавлена пошаговая инструкция по созданию ноды из модели.

Yandex SpeechKitYandex SpeechKit

• Добавлена инструкция по определению дикторов в результатах распознавания.

• Обновлено практическое руководство по потоковому распознаванию аудиофайла с помощью API v3.

• Обновлено практическое руководство по синтезу речи в API v3.

• Обновлён раздел «История изменений» в сервисах распознавания и синтеза речи Yandex SpeechKit.

Yandex SpeechSenseYandex SpeechSense

• Добавлена информация о поддерживаемых форматах аудио.

• Добавлена информация об иерархии ресурсов SpeechSense.

• Добавлены пошаговые инструкции по управлению пространством.

• Добавлены пошаговые инструкции по добавлению и удалению пользователя из проекта.

• Добавлена инструкция по созданию подключения.

Yandex TranslateYandex Translate

• Добавлена обзорная информация в справочнике API.

Yandex VisionYandex Vision

• Добавлены пошаговые инструкции по распознаванию рукописного текста и таблиц.

YandexGPT APIYandexGPT API

• Обновлена документация сервиса YandexGPT API. Сервис вышел в Preview.

• Добавлена пошаговая инструкция по отключению логирования запросов.

• Добавлена Библиотека промтов.

• Обновлена пошаговая инструкция по отправке запроса в режиме чата: добавлен пример использования API с помощью Python.

Yandex DataLensYandex DataLens

• Обновлена инструкция по созданию подключения к Google BigQuery.

• Обновлена инструкция по созданию партнёрского коннектора.

• Актуализированы правила публикации объектов.

• Добавлена инструкция по замене таблицы в датасете.

• Добавлена страница с рекомендациями по встраиванию объектов.

• Обновлена информация о необходимых доступах для создания подключения к Yandex Cloud Billing.

• Добавлена информация про миграцию в воркбуки с использованием копирования.

• Добавлено примечание про корректный формат запроса к Yandex Monitoring.

• На страницы с описанием селекторов и инструкцией по работе с ними добавлен новый вид селектора — чекбокс для работы с логическим типом данных.

Yandex FormsYandex Forms

• Добавлена «История изменений» за ноябрь, декабрь и январь.

• Обновлена инструкция по добавлению ответа на Wiki.

• В связи обновлением страницы ответов актуализировано её описание.

Yandex TrackerYandex Tracker

• Добавлено описание новой версии API для проектов и портфелей.

• Добавлена информация об удалении локальных полей.

• Добавлены инструкции по копированию дашборда и копированию виджета.

• Добавлена инструкция по редактированию спринтов.

• Добавлена инструкция по предоставлению прав пользователям после их приглашения в группу.

• Добавлена «История изменений» за ноябрь и декабрь.

• Обновлена инструкция по интеграции с сервисом GitHub: добавлена информация о получении токена GitLab.

• Добавлена инструкция по просмотру рабочего процесса на странице задачи.

• Обновлена инструкция по настройке доступа к очереди: дополнено описание доступов действующих в очереди.

• Обновлён Справочник API.

• Обновлён раздел Вопросы и ответы.

Yandex WikiYandex Wiki

• Добавлена «История изменений» за ноябрь и декабрь.

Безопасность в Yandex CloudБезопасность в Yandex Cloud

• Обновлены бюллетени безопасности.

Интерфейс командной строкиИнтерфейс командной строки

• Обновлён раздел Релизы CLI.

Обзор платформы Yandex CloudОбзор платформы Yandex Cloud

• Добавлено описание терминов: чат‑бот с искусственным интеллектом и кластер в разделе «Облачная терминология».

Партнёрам MarketplaceПартнёрам Marketplace

• Добавлена пошаговая инструкция по интеграции с License Manager API.

• Добавлена пошаговая инструкция по созданию версии продукта Cloud Apps.

Практические руководства платформы Yandex CloudПрактические руководства платформы Yandex Cloud

• Добавлено практическое руководство по миграции данных в Yandex Managed Service for OpenSearch из стороннего кластера OpenSearch с помощью Yandex Data Transfer.

• Добавлено практическое руководство по загрузке данных из Яндекс Директ в витрину Yandex Managed Service for ClickHouse^® с использованием Yandex Cloud Functions, Yandex Object Storage и Yandex Data Transfer.

• Добавлено практическое руководство по сравнению результатов нагрузочных тестов.

• Добавлено практическое руководство по переносу данных из Yandex Object Storage в Yandex Managed Service for PostgreSQL с использованием Yandex Data Transfer.

• Добавлено практическое руководство по сегментации облачной инфраструктуры с помощью решения Check Point Next-Generation Firewall.

• Добавлено практическое руководство по миграции данных из Yandex Managed Service for MySQL в Yandex Managed Service for Greenplum^® с помощью Yandex Data Transfer.