Мониторинг состояния трансфера

Данные о состоянии трансфера доступны в консоли управления. Их можно посмотреть на вкладке Мониторинг страницы управления трансфером или в сервисе Yandex Monitoring.

Диагностическая информация о состоянии трансфера представлена в виде графиков.

Вы можете настроить алерты в сервисе Yandex Monitoring для получения уведомлений о сбоях в работе трансфера. В Yandex Monitoring используются два порога срабатывания алерта: Warning и Alarm. При превышении заданного порога вы получите оповещения через настроенные каналы уведомлений.

Мониторинг состояния трансфера

Для просмотра информации о состоянии трансфера:

1. Перейдите на страницу каталога и выберите сервис Data Transfer.
2. Выберите вкладку Трансферы.
3. Нажмите на имя нужного трансфера и выберите вкладку Мониторинг.
4. Чтобы перейти к работе с метриками, дашбордами или алертами в сервисе Yandex Monitoring, нажмите кнопку Открыть в мониторинге на панели сверху.

На странице появятся графики:

• Data upload lag (histogram by seconds) — отставание данных (в секундах).
• Successfully pushed rows — количество строк, записанных в приемник.
• Maximum lag on delivery — максимальное отставание данных (в секундах).
• Successfully pushed rows by tables (top-50 tables) — ТОП-50 таблиц с максимальным количеством записанных в приемник строк.
• Read buffer size — объем буфера или журнала опережающей записи (там, где он поддерживается) в источнике (в байтах).
• Read bytes from source (top-50 workers) — объем считанных из источника данных (в байтах).
• Sink response time (histogram by seconds) — время ответа приемника (в секундах).
• Read rows (parsed/unparsed) — количество считанных из источника строк.
• Snapshot task progress (top-50 tables) — количество строк, ожидающих переноса.
• Snapshot task status — выполняющаяся операция (0 — репликация, 1 — копирование).

Интеграция с Yandex Monitoring

Чтобы настроить алерты показателей состояния трансфера:

1. В консоли управления выберите каталог с трансфером, для которого нужно настроить алерты.
2. В списке сервисов выберите раздел Monitoring.
3. В блоке Сервисные дашборды выберите Data Transfer.
4. На нужном графике с показателями нажмите на значок и выберите пункт Создать алерт.
5. Если на графике больше одного показателя, создайте запрос данных для формирования метрики.Подробнее о языке запросов см. в документации Yandex Monitoring.
6. Задайте значения порогов Alarm и Warning для оповещения.
7. Нажмите Создать алерт.

Рекомендуемые значения порогов для некоторых метрик: