Продуктовый дайджест Yandex Scale 2023

Рассказываем про все продуктовые анонсы и другие новости конференции Yandex Scale 2023.

Infrastructure & Kubernetes

Главное

За год мы поработали над надёжностью сервиса Yandex Cloud Backup. Уже сейчас многие наши клиенты делают резервные копии таких критичных систем, как ERP, CRM или бухгалтерия — а теперь Cloud Backup стал доступен для всех пользователей. Появились и новые возможности: восстановление отдельных файлов, целостное восстановление данных и перенос последнего состояния на новую виртуальную машину.

Другие новости

Файловые хранилища стали доступны всем пользователям Yandex Cloud

С 20 сентября всем пользователям Yandex Cloud доступны файловые хранилища

Файловое хранилище — это виртуальная файловая система, которую можно подключить к нескольким виртуальным машинам Yandex Compute Cloud из одной зоны доступности. С файлами можно работать одновременно с нескольких таких ВМ.

Файловые хранилища обычно используются распределёнными приложениями, которым нужен доступ к централизованной файловой системе на чтение и запись, но которые по каким‑то причинам не работают с протоколом S3 (Simple Storage Service).

Примеры таких задач: хранение данных для распределённого обучения ML‑моделей или для распределённого рендеринга.

Тарифы →

Высокопроизводительные SSD‑диски в Yandex Compute Cloud

Новые SSD‑диски network‑ssd‑io‑m3 теперь доступны всем пользователям платформы. Высокопроизводительные SSD‑диски позволяют производить большое количество операций чтения и записи в секунду с высокой степенью надёжности. Кроме того, они подходят для размещения высоконагруженных приложений: до 75 000 IOPS на диск (при соблюдении условий).

Карта сетевых взаимодействий Cloud Network Map

Чтобы разобраться с вопросами сети в Yandex Cloud, мы сделали визуализацию: карту сетевых взаимодействий. Вы сможете понять топологию ваших облачных сетей и подключённых к ним ресурсов.

Высокочастотные процессоры

Теперь пользователям платформы доступны высокочастотные процессоры (х1,5 по частоте). Виртуальные машины с такими процессорами отлично подходят для анализа данных или пригодятся в высоконагруженных решениях типа 1С.

Расписания снапшотов

Возможность создавать снапшоты по расписанию теперь стала общедоступной.

Подробнее →

Yandex Virtual Private Cloud: функциональность Egress NAT выходит в общий доступ

Функциональность Egress NAT стала доступна всем пользователям платформы. Egress NAT позволит виртуальным машинам с непубличными IP‑адресами выходить в интернет через NAT‑шлюз с общим диапазоном IP‑адресов.

Обновление в Yandex Managed Service for GitLab

Теперь сервис Managed Service for GitLab — это не только возможность получить собственный надёжный инстанс GitLab в один клик, но и дополнительные сервисы, расширяющие функциональность Community Edition.

В Public Preview выходит модуль Approval Rules — альтернатива одноимённой функциональности GitLab Enterprise Edition. Модуль максимально совместим со стандартными настройками GitLab, поддерживается формат CODEOWNERS. Запросить доступ можно с экрана редактирования инстанса Managed GitLab.

Для пользователей Yandex Tracker теперь доступна расширенная интеграция c Managed Service for GitLab. На странице задачи отображаются связанные коммиты и merge requests, а в комментариях — автоматические сообщения об изменении статусов. Теперь о состоянии задачи можно узнать, не выходя из Tracker.

Стала доступна для настройки OmniAuth — интеграция с внешними системами управления пользователями, например с корпоративной Active Directory или с облачным gitlab.com. Интегрировать свой инстанс в собственную инфраструктуру стало проще.

Обновления в Yandex Load Testing

С сервисом Yandex Load Testing вы построите процесс нагрузочного тестирования любой сложности и интенсивности. Из новых возможностей — сравнение тестов, возможность запуска агента вне облака, поддержка JMeter и публичный API для запуска тестов.

Yandex Managed Service for Prometheus®

Представляем универсальный инструмент, основанный на распределённой системе Yandex Monitoring. Yandex Managed Service for Prometheus® позволяет построить масштабируемую и отказоустойчивую систему мониторинга с различными инструментами и источниками данных. Пользователи смогут работать в привычной экосистеме Prometheus® и не беспокоиться о самостоятельной поддержке инфраструктуры. Подходит для приложений, размещённых на любой облачной платформе и on‑premise.

Security

Главное

Последний год был насыщенным с точки зрения ИБ: возросла активность злоумышленников, а выбор средств защиты у сторонних компаний значительно уменьшился. Наша стратегия в том, чтобы гибко реагировать на потребности рынка и дать простые решения для защиты от возникающих угроз. На Yandex Scale 2023 мы представили сервис для защиты веб‑приложений — Smart Web Security. Также критически важно контролировать то, что происходит с самой инфраструктурой в Yandex Cloud и кто имеет к ней доступ. Мы последовательно централизуем управление доступами с помощью сервиса Identity and Access Management и подготовили большое обновление.

Другие новости

Обновления в Identity and Access Management

Yandex OS Login — одна из самых крупных фич сервиса. С её помощью можно безопасно управлять доступом к виртуальным машинам по SSH:

  • При использовании Yandex OS Login доступ к ВМ контролируется через IAM.

  • По умолчанию включены безопасные короткоживущие сертификаты, но есть и возможность использовать статичные ключи.

  • Доступ можно легко получить через CLI, а в случае потери учётных данных — без сложностей восстановить доступ к ВМ.

Функциональность находится в стадии Public Preview.

Синхронизация групп для SAML‑федераций. Если вы используете Single sign‑on аутентификацию (федерацию) в Yandex Cloud через ваш Identity Provider, теперь вы можете синхронизировать не только отдельных пользователей, но и группы. Функциональность находится в стадии Public Preview.

Роль auditor. Доступна новая роль — auditor. Пользователь с такой ролью имеет доступ на чтение конфигурации и метаданных сервисов без возможности доступа к данным. Эту роль можно выдать пользователю, который проводит аудит безопасности (например, подрядчику), или использовать при интеграции с сервисами вроде NeoCAT.

Multilogin. Появилась возможность быстро переключаться между аккаунтами, принадлежащими к разным организациям Yandex Cloud (например, если у вас есть облака для Sandbox и продакшена). При этом аккаунты должны использовать общую федерацию удостоверений. Функциональность находится в стадии Public Preview.

Имперсонация сервисных аккаунтов позволяет пользователю временно выполнять действия от имени сервисного аккаунта. Таким образом можно временно расширить права без генерации статических учётных данных. Это пригодится, например, разработчикам при отладке или администраторам для проверки прав доступа пользователя.

Приглашения для новых пользователей. Теперь нового пользователя можно добавить в организацию только после того, как он явно это подтвердит. Когда администратор добавляет пользователя в систему, на почту пользователя приходит письмо с просьбой подтвердить согласие.

Обновления в Yandex SmartCaptcha

Теперь в Yandex SmartCaptcha вы можете использовать три новых вида заданий для прохождения капчи: слайдер, калейдоскоп и силуэты.

Слайдер — это простые задания для первого этапа проверки, альтернатива «галочке». Они удобны для пользователей, которые заходят на сайт с мобильных устройств. Силуэты и калейдоскоп — усложнённые задания для тех, чьи действия на первом этапе показались подозрительными. В усложнённых заданиях пользователь должен в заданном порядке нажимать на силуэты с картинками или двигать ползунок, чтобы собрать картинку из фрагментов.

Логи уровня data plane в Yandex Audit Trails

Yandex Audit Trails позволяет собирать и выгружать аудитные логи ресурсов облака. Раньше были доступны только логи событий уровня control plane — событий, происходящих на уровне конфигурации ресурсов. Например, создание бакета в Object Storage или создание зоны DNS.

Теперь доступны и логи событий уровня data plane, происходящие с содержимым ресурсов. Например, в Object Storage это доступ к объекту внутри бакета или отправка DNS‑запроса от ВМ.

Новая возможность позволит получать ещё более детализированную информацию о доступе к данным в облаке и поможет в предотвращении и расследовании инцидентов безопасности.

Функциональность находится в стадии Public Preview.

Обновления Yandex Key Management Service

В KMS теперь доступна асимметричная криптография. Использование асимметричной криптографии предполагает работу с ключевыми парами, состоящими из открытого (публичного) и закрытого (приватного) ключей. Подробности — в нашей статье.

Функциональность находится в стадии Public Preview.

Шифрование сетевых дисков ключами из Yandex Key Management Service. По умолчанию все пользовательские данные в состоянии покоя (at rest) зашифрованы на уровне Yandex Cloud. Однако, если нужно управлять шифрованием самостоятельно, вы можете шифровать данные собственными ключами из KMS или системного ключа при создании диска виртуальной машины. В данный момент зашифровать можно диски network‑SSD, network‑HDD и NRD. Функциональность находится в стадии Public Preview.

Yandex Container Registry: сканирование Docker‑образов по расписанию

В сервисе Yandex Container Registry теперь можно настроить сканирование Docker‑образов по расписанию. Сканирование включает в себя проверку контейнерных образов на наличие уязвимостей в компонентах, библиотеках и зависимостях, которые используются в образе.

Новые уязвимости обнаруживаются постоянно, даже в старых образах. Поэтому необходимо регулярное сканирование на основе актуальных данных.

Функциональность находится в стадии Public Preview.

Новый курс «Compliance в облачной инфраструктуре»

Запустили новый курс: Compliance в облачной инфраструктуре. Курс ориентирован на руководителей продуктов и проектов, а также на аудиторов безопасности.

Вы научитесь работать со стандартами безопасности и узнаете:

  • что такое стандарты безопасности и какие есть требования законодательства;

  • как применяются требования регуляторов и стандартов в контексте облака;

  • основные практические аспекты соответствия требованиям безопасности.

Serverless

Главное

Serverless — это целая экосистема для вычислений, работы с данными и интеграции облачных сервисов. Мы стремимся, чтобы в Yandex Cloud для решения каждой вашей задачи был нативный и интегрированный с другими инструментами сервис. На конференции мы представили новый продукт — Yandex Cloud Postbox, сервис для отправки транзакционных писем в инфраструктуре Yandex Cloud. Кроме этого, в этом году мы уделили много внимания развитию существующих бессерверных сервисов.

Другие новости

Мультиядерные конфигурации функций и контейнеров

Раньше пользователям Yandex Cloud Functions и Yandex Serverless Containers было доступно только одно ядро процессора на один экземпляр функции или контейнера. Теперь мы предоставляем второе вычислительное ядро для функций и контейнеров, с объёмом памяти не менее 4 GB. Это позволит обрабатывать более ресурсоёмкие задачи и повысит эффективность их выполнения в serverless‑режиме.

Сквозное монтирование бакетов Yandex Object Storage

Добавили возможность сквозного монтирования бакета объектного хранилища как файловой системы, вызываемой из функции или контейнера. Новая функциональность упрощает доступ в Yandex Object Storage из Yandex Cloud Functions и Yandex Serverless Containers. Теперь нет необходимости использовать сторонние SDK и поставлять статистические ключи доступа. Функция обрабатывает события в Yandex Object Storage и читает содержимое новых объектов напрямую из файловой системы.

Функциональность Read‑only находится в стадии Preview и доступна всем пользователям, а доступ к записи можно получить по запросу.

Асинхронные вызовы функций

Мы добавили возможность запускать облачные функции в синхронном режиме и в режиме отложенного исполнения. Асинхронный вызов позволяет не дожидаться завершения работы пользовательского кода, а получить результат исполнения в отложенном режиме. Это помогает эффективно реализовывать сложные процессы, не укладывающиеся в вызов одной функции. На момент запуска сбор результатов выполнения доступен в Yandex Message Queue, в дальнейшем будут поддерживаться Yandex Data Streams и Object Storage. Также появится возможность вызова другой функции, что позволит упростить процесс построения пайплайнов обработки ресурсоёмких запросов.

Мы запускаем функциональность в режиме Preview, доступ к ней можно получить по запросу.

Обновления в триггерах

Теперь пользователям доступно редактирование триггеров. Раньше можно было редактировать только общие поля (имя и описание). Сейчас без пересоздания триггера можно изменять и компоненты.

Добавили поддержку батчинга. Теперь пользователям Yandex IoT Core, Yandex Object Storage и Yandex Container Registry доступна групповая обработка событий. Например, можно сократить количество вызовов функции, если объём событий мал, а самих событий много.

Запустили поддержку параметризации в Timer Trigger. Это позволяет добавить дополнительную информацию к таймеру, вызывающего функцию. Теперь пользователям доступна реализация сценария, когда функцию вызывает одновременно несколько таймеров и она выполняет нужное действие для каждого таймера.

Добавили параметр для фильтрации по Stream Name в триггеры для Yandex Cloud Logging. Теперь можно точнее настроить триггер на запись из выбранного потока лог‑группы, что позволяет сократить количество вызовов функций и, как следствие, снизить чек.

Новые возможности в Yandex API Gateway

Rate Limiter позволяет ограничивать количество запросов к API‑шлюзу в единицу времени для защиты от DDoS‑атак и перерасхода облачных ресурсов. В случае если входящие запросы превышают лимит, они не обрабатываются и сразу возвращается ответ с HTTP‑кодом «429: Too Many Requests».

Canary Deployment — канареечные релизы в API Gateway позволяют применять изменения OpenAPI‑спецификации API‑шлюза не сразу для всех входящих запросов, а постепенно только для определённой его доли. Этот повсеместно используемый подход позволяет относительно безопасно тестировать новые версии приложений, а также постепенно выкатывать в продакшн новую функциональность.

Экспорт данных из Yandex IoT Core в Yandex Data Streams

Добавили возможность обрабатывать данные с устройств и датчиков IoT с использованием сервиса Yandex Data Streams. Это позволит пользователям решать такие задачи, как настройка поставки данных в системы хранения с помощью Yandex Data Transfer. На стороне устройств за общение устройств отвечает MQTT‑протокол, а на стороне облака теперь можно вычитывать данные из сервиса Yandex Data Streams, поддерживающего Kinesis API. Также появилась возможность читать телеметрию с десятков тысяч устройств, не ограничиваясь возможностями MQTT‑протокола.

Новые возможности в Yandex Cloud Logging

В интерфейсе Yandex Cloud Logging появились изменения:

  • Строка поиска стала отзывчивее и стабильнее.

  • Изменилась механика отправки запросов.

  • Уменьшился размер log level: теперь он почти не занимает места на странице.

  • На странице стало помещаться вдвое больше логов.

  • Появилась фильтрация по JSON по клику на значение.

  • Добавили графики с группировкой по уровням логов. Теперь можно быстро выявлять временные интервалы с аномалиями.

Экспорт данных в Yandex Object Storage. Теперь, чтобы разовая выгрузка из лог‑группы стала доступна, достаточно зарегистрировать бакет в Yandex Cloud Logging как приёмник данных. Для этого надо указать бакет, сервисный аккаунт и путь для поставки данных. В дальнейшем появится возможность создавать выгрузки из лог‑группы по расписанию.

Плагин Yandex Cloud Logging для Grafana. Мы создали плагин для Grafana. Теперь пользователи платформы смогут добавлять логи из Yandex Cloud Logging на один дашборд c диагностической информацией из других систем, интегрированных с Grafana.

Data Platform

Главное

За первое полугодие 2023 года потребление сервисов группы «Платформа данных» выросло вдвое. Пользователи Yandex Cloud применяют управляемые сервисы платформы для самых разных задач: реализация комплексных сценариев по передаче, обработке и хранению данных, создание хранилищ данных и дашбордов, обучение ML‑моделей. На конференции Yandex Scale 2023 мы рассказали о запуске Yandex Managed Service for Apache Airflow и о выходе DataLens в Open Source. Кроме того, мы хотим поделиться другими обновлениями сервисов группы «Платформа данных».

Другие новости

Отслеживание событий в кластерах

Теперь пользователи могут отслеживать аудитные события, которые происходят в кластерах ClickHouse®, Redis, MongoDB, OpenSearch, Elasticsearch, Apache Airflow, Data Proc и Hive Metastore. Это увеличит прозрачность процессов в управляемых кластерах.

Yandex WebSQL

Новый инструмент упростит работу с SQL‑базами данных в Yandex Cloud. С его помощью вы можете централизованно работать со всеми своими базами данных — просматривать их схемы, вносить изменения, писать SQL‑запросы, пользуясь автокомплитом и подсветкой ошибок, добавлять запросы в избранное, а также просматривать историю выполненных запросов.

Сервис находится в стадии Preview и не тарифицируется, а доступ к нему можно получить по заявке. Подробнее →

Yandex Managed Service for Greenplum®

Добавили Command Center — новый инструмент, который позволит разработчикам и администраторам анализировать производительность СУБД Greenplum®. Доступные функции:

  • данные о текущих сессиях, запросах и блокировках;

  • данные о текущих запросах без прогресса плана выполнения (также поддерживается показ самого плана выполнения);

  • возможность удалить сессию из интерфейса;

  • хранение истории сессий и запросов;

  • показ истории запросов и сессий.

Расширение Hybrid Storage для нативной интеграции с Object Storage. Позволяет выгрузить данные в Object Storage и продолжать работать с ними как с традиционными таблицами Append‑Only. Данные в Object Storage шифруются и продолжают храниться в бинарном (не CSV) формате. Это позволяет исключить ресурсоёмкие промежуточные преобразования, что важно для производительности запросов.

Yandex Data Transfer

Добавили возможность видеть состояние трансфера на таймлайне. Теперь на графике вы сможете увидеть, в какой момент ваш трансфер успешно переносил данные, когда на нём возникли ошибки, а когда он не работал. Пока функциональность доступна тестовым группам пользователей.

Поддержали нативный коннектор к AWS S3 в режиме копирования. Теперь вы можете переносить ваши данные из AWS S3 ещё проще. Данная функциональность находится на стадии Preview и предоставляется по запросу. Также добавили поддержку формата Apache Parquet для эндпоинта приёмника Object Storage.

Реализовали отслеживание аудитных событий в сервисе Audit Trails. Добавили новую роль data‑transfer.auditor в составе роли auditor для управления доступом к сервису. Кроме того, теперь для создания или редактирования эндпоинта управляемой БД вам потребуется сервисная или примитивная роль viewer, выданная на каталог кластера этой управляемой базы данных.

Добавили возможность трансформации данных — преобразования данных с помощью особой функции‑трансформера. Такие функции выполняются на потоке данных, применяются к элементу изменений данных (data change item) и преобразуют их. Трансформация доступна, если источник и приёмник имеют разные типы. Сервис подскажет, возможна ли трансформация данных, и выдаст необходимую настройку. Функциональность доступна в режиме Preview.

Обновили Terraform‑провайдер, добавив операции с эндпоинтами Apache Kafka® и YDB в Terraform‑провайдере.

Расширили связность между эндпоинтами: появилась возможность передавать данные из PostgreSQL в MySQL и обратно. Поддержали PostgreSQL‑источник версии 15. Подробнее →

Также Data Transfer стал доступен в мобильном приложении.

Yandex Data Proc

Создание управляемых кластеров Hive Metastore теперь доступно для всех пользователей. В июне мы анонсировали запуск новой функциональности в сервисе Data Proc. Сейчас начать использовать Hive Metastore можно без заявки на доступ. Функциональность находится в режиме Public Preview и не тарифицируется.

Yandex Managed Service for ClickHouse®

Сервис для управления кластерами ClickHouse теперь поддерживает новую LTS‑версию 23.8. Полный список изменений доступен на сайте.

Yandex Managed Service for PostgreSQL

Добавили планы запросов для диагностики производительности в интерфейс сервиса.

Функциональность доступна при создании новых кластеров.

Также запустили авторесайз диска. Теперь доступна настройка, при которой диск увеличится автоматически, если объём занятого места достигнет определённого порога. Это позволит предотвратить ситуацию, когда из‑за нехватки места база переходит в режим «Только чтение».

Поддержали новую версию PostgreSQL 16 с новыми функциональностями и улучшениями:

  • Появилось представление pg_stat_io для мониторинга ввода и вывода.

  • Доступно параллельное выполнение полного и правого хеш‑соединения.

  • Повысилась производительность операции Vacuum Freeze.

  • Появилась возможность настроить логическую репликацию с реплики.

  • Все новые кластеры Yandex Managed Service for PostgreSQL версии 16 используют локали ICU вместо libc.

Полный список обновлений

Yandex Managed Service for Redis

Новая версия Redis 7.2 уже в консоли. Полный список обновлений

Yandex DataSphere

Запустили Yandex DataSphere Jobs. С помощью этой функциональности пользователи смогут подключить ресурсы облака для обучения моделей через интерфейс командной строки или из локальных IDE. Это позволит вести как локальную разработку с подключением облачных вычислений, так и организовать гибридный формат работы, когда в облако передаётся только ресурсоёмкий код.

Кроме того, теперь вы можете работать с моделью YandexGPT в интерфейсе DataSphere: дообучайте модель и адаптируйте её под ваши задачи.

Расширили возможности хранения и деплоя моделей. Стало доступно хранение обученных в DataSphere моделей, их импорт в окружение интерпретатора и скачивание на локальную машину. Также доступно совместное использование моделей в рамках проектов или сообществ.

YDB

YDB теперь поддерживает колоночный формат таблиц и выполнение аналитических запросов в режиме Preview. С помощью колоночных таблиц можно добиться намного более высокой степени сжатия данных, эффективной пакетной загрузки данных и быстрого выполнения сложных аналитических SQL‑запросов.

Также доработали процесс создания приложений для YDB: для пользователей других СУБД он стал более привычным. Новое управление транзакциями в YDB снимает ограничения на последовательность операций: чтение и запись данных в транзакции теперь может выполняться в любом порядке. Это упрощает разработку и позволяет поддержать YDB в популярных ORM‑фреймворках.

В YDB появился драйвер JDBC, который позволит более эффективно использовать YDB в экосистеме инструментов разработки Java.

Yandex Query

Добавили возможность выполнения федеративных запросов к внешним источникам данных. На первом этапе поддерживаются запросы к базам данных PostgreSQL и ClickHouse. Данные из внешних источников можно объединять в одном запросе с данными, хранящимися в Object Storage.

Оптимизировали работу сервиса с большим количеством файлов в Object Storage, а также реализовали поддержку чтения файлов произвольного размера в формате Apache Parquet.

Yandex Data Streams

Реализовали поддержку чтения и записи топиков с использованием протокола Apache Kafka®. Это позволяет использовать для работы с Data Streams широкий набор доступных инструментов и библиотек с поддержкой Apache Kafka®. Кроме того, стала возможной интеграция приложений, созданных с использованием разных инструментов — например, запись данных в топик через интерфейс Amazon Kinesis и чтение через интерфейс Apache Kafka®.

Yandex Message Queue

Сняли ограничение на количество создаваемых и используемых очередей сообщений. Это позволит естественным образом реализовывать сценарии взаимодействия «точка — точка» без сложной логики приложения для маршрутизации передаваемых сообщений.

Yandex DataLens

Добавили новую сущность — воркбуки. Это контейнер для порядка и удобства командой работы, где пользователь получает единый доступ к подключениям, датасетам, чартам и дашбордам. Включить воркбуки можно в настройках сервиса.

Внедрили новую ролевую модель. Теперь внутри DataLens есть сервисные роли и роли в воркбуках и коллекциях. Сервисные роли назначаются на организацию, а роли в воркбуках и коллекциях назначаются внутри UI DataLens.

Добавили группы пользователей. Они создаются и администрируются на уровне организации — org.cloud.yandex.ru. Права на воркбуки можно назначать группам пользователей.

Изменения в приглашении пользователей c Яндекс ID. Пользователей с аккаунтом на Яндексе (например, login@yandex.ru) теперь нужно приглашать. Они становятся полноценными пользователями только после того, как подтвердят добавление. С федеративными учётными записями приглашения не требуются.

Новые возможности в подключениях ClickHouse и PostgreSQL. Реализовали возможность принудительного использования TLS и собственного сертификата и добавили запрет на экспорт данных: функциональность скрывает кнопку экспорта данных из всех чартов подключения.

Встраивание чартов во внешние системы (Secure Embedding). Добавили механизм генерации сложных ссылок на чарты с подписанным параметром в виде JWT-токена и ограниченным временем жизни. Функциональность находится в режиме Public Preview. Оставьте заявку через форму с описанием вашего кейса, и мы рассмотрим возможность включить вас в этап тестирования функциональности.

Machine Learning

Главное

На Yandex Scale 2023 мы рассказали про Yandex SpeechSense — сервис речевой аналитики для глубокого анализа голосовых и текстовых коммуникаций, который является следующим этапом развития наших технологий и базируется на Yandex SpeechKit и YandexGPT. Также мы поделились результатами закрытого тестирования YandexGPT и представили новую функциональность Yandex SpeechKit — анализ результатов распознавания.

Анализ результатов распознавания в Yandex SpeechKit

Теперь Yandex SpeechKit может анализировать аудио во время распознавания и вместе с результатами возвращать дополнительную информацию: события в аудио и тексте, длительность речи и пауз, скорость речи говорящего, количество слов в фразах и другие метки и метрики речевой аналитики.

С помощью классификаторов можно найти определенные события в аудио- или текстовой записи. Сейчас таким образом Yandex SpeechKit умеет выделять формальные и неформальные приветствия и прощания, а также оскорбления и мат.

Также появилась возможность анализировать диалоги и речь отдельных участников. По результатам анализа пользователям предоставляются следующие данные.

Для каждого участника диалога:

  • скорость и длительность речи;

  • длительность пауз;

  • количество и размеры фраз.

Для диалога в целом:

  • длительность одновременной речи и длительность одновременных пауз;

  • количество перебиваний и их расположение.

Подробнее читайте в документации.

Business tools

Главное

Мы продолжаем работу над развитием наших бизнес‑инструментов. Например, мы расширили практическое применение Yandex Tracker в больших сценариях использования и улучшили инструменты для управления проектами. Также добавили новый редактор в Yandex Wiki и новый интерфейс в Yandex Forms.

Другие новости

Обновления Yandex Tracker

Поддержали возможности для agile‑команд, работающих по Scrum- и Kanban‑методологиям:

  • Новый покер планирования. Теперь на доске по умолчанию остаются только задачи без оценок и любую из них можно добавить в покер для командной оценки. Преимущество перед старой версией покера — не нужно делать двойную работу: сначала добавлять задачи в покер, потом на доску и задавать ей приоритет на доске.

  • Ограничение задач в колонках и группах (WIP‑лимиты). WIP или Work in Progress — это объём работы, который уже запланировали сделать, но пока не сделали. Благодаря новой функциональности сократится объём «почти сделанных» задач, и меньше времени будет уходить на переключение контекста. Кроме того, обновление поможет подсветить узкие места процессов (например, код‑ревью или согласований), где простой или перегрузка могли стать постоянными проблемами.

  • Swim lane — «дорожки» или группировка задач по любым полям. Такие дорожки нужны для того, чтобы группировать задачи по их приоритету или классам обслуживания. Теперь для обозначения приоритета задачи можно использовать любое поле и группировать по нему задачи на доске.

  • Drag‑and‑drop групп на доске. На досках в Tracker можно задать ручной порядок для групп задач — например, ранжировать группы проектов, эпиков, story — или группировать задачи по клиентам и задавать свой порядок отображения групп на доске.

  • Автоматическое добавление и удаление задач с доски. Чтобы не терять задачи, можно настроить условия, по которым новые задачи будут автоматически переезжать на доску команды. А давно закрытые задачи — уходить с доски, чтобы фокус оставался на актуальных задачах и доска не переполнялась.

Реализованы новые возможности в модуле управления проектами, в том числе:

  • Портфели проектов. Это позволит структурировать деятельность компании, выстроить иерархию от крупных бизнес‑направлений к проектам конкретного квартала и планировать роадмап на ближайшие годы. А также сделать процесс контроля и отчётности по прогрессу проектов перед руководством и заказчиками более прозрачным.

  • Вехи в проектах. Вехи (Milestones) на диаграмме Ганта отображают ключевые контрольные точки проекта, которые помогают отслеживать прогресс по проекту и визуально подсветить завершение больших этапов работы. Вехи также повышают прозрачность прогресса по проекту для заказчиков и руководства.

  • Критический путь проекта. Это инструмент, который подсвечивает общую продолжительность проекта на основе сроков его задач и визуально выделяет на диаграмме Ганта наиболее критические задачи для завершения проекта в срок.

Реализовали учёт времени. Фиксировать и отслеживать затраченное на выполнение задач время стало удобнее, что особенно важно при взаимодействии с распределёнными командами.

Добавили визуальный редактор воркфлоу. Задавать сценарии работы с задачами и алгоритмы их автоматизации стало удобнее и быстрее.

Реализовали возможность управления доступами. Теперь проще масштабировать Tracker в больших компаниях, где необходимо разделять уровни доступа к чувствительным данным для разных групп пользователей, в том числе сторонних подрядчиков.

Поддержали возможность администрировать организации пользователей, чтобы было проще выбирать, добавлять или заменять источники организаций пользователей в Yandex Cloud или Яндекс 360.

Обновления Yandex Wiki

Добавили WYSIWYG‑редактор, который сделал работу с вики‑страницами нативной. Теперь страницы можно редактировать прямо в интерфейсе, без использования разметки.

Поддержали draw.io и Mermaid для создания диаграмм на страницах. Draw.io позволяет создавать диаграммы перетаскиванием блоков, а Mermaid подходит для тех, кто хочет описывать свои диаграммы разметкой.

Обновления Yandex Forms

Новый интерфейс форм. Появилась тёмная тема, обновился дизайн страницы с результатами опроса. Кроме того, в опросе теперь сохраняются введённые значения на случай, если пользователь закрыл страницу. В вопросе «Один вариант» можно изменить вид отображения, а также расположить варианты ответов в один ряд.

Ограничение доступа. Заполнять форму теперь можно ограниченным кругом сотрудников организации. Достаточно выдать доступ на сотрудников, на группу или отдел.

Сохранение прикреплённых файлов из ответов формы в пользовательское хранилище. В личных формах можно сохранять файлы в личный Диск, в формах организации можно подключить облачное хранилище.

Возможность записывать ответы в динамическую таблицу Wiki. Расширение интеграции с сервисом Wiki: ответ можно сохранить не только на страницу, но и в динамическую таблицу, а значение конкретного поля можно записать в указанный столбец таблицы. Больше не нужно настраивать статическую таблицу и разбираться в её разметке.

Добавили интеграцию с Yandex Cloud Functions: теперь можно вызвать облачную функцию по нажатию кнопки отправки формы. Это пригодится, например, когда нужно отправлять ответы из формы сразу в свою базу данных. А далее из базы можно передать данные в DataLens и визуализировать ответы форм.

Обновления Yandex Cloud Marketplace

С помощью License Manager поддержали подписную модель тарификации решений. Теперь партнёры могут размещать решения по подписке, а клиенты оплачивать использование продуктов и централизованно управлять подписками в интерфейсе Yandex Cloud.

Open Source

Главное

Yandex Cloud активно пользуется решениями с открытым исходным кодом. Без них не появились бы ни внутренние продукты, ни самые популярные сервисы платформы. Мы многое взяли из мира open source и хотим отдавать обратно. За последние 10 лет мы выложили в открытый доступ более 150 проектов, активными участниками которых являются более 2300 разработчиков по всему миру. На конференции Yandex Scale 2023 мы рассказали о наборе библиотек для построения современных пользовательских интерфейсов Gravity UI и о распределённой отказоустойчивой Distributed SQL базе данных YDB, а также представили Diplodoc — платформу для создания технической документации в концепции Documentation as Сode. Кроме того, мы открыли исходный код DataLens — своей системы для анализа и визуализации данных.

Gravity UI

Все интерфейсы Yandex Cloud — консоль, сервисы DataLens, Monitoring, Tracker — разработаны на базе библиотек Gravity UI. Это набор готовых React‑компонентов, среди которых доступны самые разнообразные элементы: кнопки, чекбоксы, селекты и не только. В состав Gravity UI также входит конструктор сайтов. Это полноценная библиотека для рендеринга веб‑страниц или их частей, которая в том числе позволяет адаптировать интерфейсы для мобильных панелей. Gravity UI включает в себя компоненты навигации для составных и комплексных интерфейсов как для промосайтов, так и для самих продуктов.

При разработке библиотек мы учли пожелания дизайн‑команд: в Gravity UI появилась дизайн‑система в виде подробных понятных гайдов в Figma и документации. Это позволяет полноценно использовать Gravity UI и UX‑дизайнерам, и разработчикам.

Diplodoc

26 сентября мы выкладываем в открытый доступ ещё один наш продукт — платформу Diplodoc. Это простое и удобное решение для развёртывания документации любого размера и сложности. Платформа позволяет работать с документацией, как с кодом: в привычной среде и с минимальными усилиями по развёртыванию и поддержке, с полной интеграцией в уже существующие CI/CD‑системы организации.

Синтаксис Markdown позволяет концентрироваться на содержании документов, а не на изучении команд или сложных, редко использующихся вызовов. Также есть возможность генерировать документацию из единого источника, работать с переменными и кастомизировать отображение в зависимости от ваших потребностей.

YDB

В 2022 году YDB вышла в open source, и за это время совместно с участниками сообщества мы реализовали много новых сценариев. Например, пользователи неоднократно просили совместить масштабируемость YDB и возможность использовать традиционные решения в области баз данных, такие как СУБД PostgreSQL. Мы прислушались к просьбам, и теперь в нашем репозитории на GitHub появилась версия, которая способна проходить pgbench — бенчмарк от PostgreSQL.

Кроме того, в этом году мы добавляем поддержку Apache Kafka® в ядро YDB и в Yandex Cloud, фактически предлагая нашим пользователям Serverless Apache Kafka®. Также мы добавили в ядро YDB поддержку федеративных запросов, то есть возможность подключать к базе данных другие источники данных.

Яндекс 360

Главное

На Yandex Scale 2022 мы рассказали про объединение Yandex Cloud и Яндекс 360, которое позволит нам предоставлять весь спектр облачных услуг. За это время мы сделали более 150 доработок и новых фич. Это означает, что каждую неделю наши клиенты получали несколько новых функций. Сейчас мы продолжаем наращивать темпы. Самые динамично растущие сервисы по внедряемым решениям и динамике роста пользователей — это Яндекс Мессенджер и Телемост. Расскажем о главных обновлениях этих сервисов.

Яндекс Мессенджер

В Мессенджере мы запустили треды, групповые звонки, фильтрацию сообщений и бот‑платформу, благодаря чему теперь можно автоматизировать множество пользовательских сценариев: автоматически создавать чаты на базе принадлежности пользователей к группам, подписываться на обновления во внешних системах и многое другое. В целом, можно сказать, что Мессенджер можно использовать не только как корпоративный инструмент обмена мгновенными сообщениями.

Телемост

В Телемосте мы повысили качество и надёжность связи, улучшили трансляцию звука в вебе, добавили кик и бан пользователей. Но это не всё: мы активно работаем над дальнейшим развитием Телемоста.

Техническая поддержка

Новый Support Center

Новый Support Center — это заново осмысленный и перестроенный раздел взаимодействия с поддержкой в консоли Yandex Cloud. Новые возможности: поиск решения по проблеме из базы, улучшение функциональности фильтров, всплывающие подсказки, оповещения при ответе в тикете и оповещения о плановых работах. А также обновлены тарифные планы.

Тариф «Бизнес» подходит для поддержания высокого уровня продуктивности и включает в себя больше каналов для связи, в том числе чаты и более быстрая реакция на критические обращения.

Лучший способ попробовать новые возможности — открыть Support Center в консоли!

Напишите нам

Начать пользоваться Yandex Cloud

Тарифы

Узнать цены и рассчитать стоимость

Мероприятия

Календарь событий Yandex Cloud
Продуктовый дайджест Yandex Scale 2023
Войдите, чтобы сохранить пост