Мониторинг состояния трансфера

Данные о состоянии трансфера доступны в консоли управления. Их можно посмотреть на вкладке Мониторинг страницы управления трансфером или в сервисе Yandex Monitoring.

Диагностическая информация о состоянии трансфера представлена в виде графиков.

Вы можете настроить алерты в сервисе Yandex Monitoring для получения уведомлений о сбоях в работе трансфера. В Yandex Monitoring используются два порога срабатывания алерта: Warning и Alarm. При превышении заданного порога вы получите оповещения через настроенные каналы уведомлений.

Мониторинг состояния трансфера

Для просмотра информации о состоянии трансфера:

На странице появятся графики:

• Data upload lag (histogram by seconds) — гистограмма, которая показывает разницу во времени между появлением записей на приемнике и их появлением на источнике (в секундах). Гистограмма разбита на диапазоны (bin).

  Допустим, в выбранный момент времени на гистограмме представлены два диапазона bin 45 и 60, со значением в 50% каждый. Это означает, что половина переносимых в этот момент записей имела задержку передачи от 30 до 45 секунд, а половина — от 45 до 60 секунд.

• Successfully pushed rows:

  • Для табличных СУБД — скорость вставки строк в таблицы.
  • Для нереляционных СУБД — скорость переноса объектов, хранящихся в коллекциях (штук в секунду).

• Maximum lag on delivery — максимальное отставание данных (в секундах).

• Successfully pushed rows by tables (top-50 tables) — ТОП-50 таблиц с максимальным количеством записанных в приемник строк.

• Read buffer size — объем буфера или журнала опережающей записи (там, где он поддерживается) в источнике (в байтах).

• Read bytes from source (top-50 workers) — объем считанных из источника данных (в байтах).

• Sink response time (histogram by seconds) — время, нужное приемнику для обработки запроса от источника за последний интервал мониторинга (в секундах).

• Read rows (parsed/unparsed) — количество считанных из источника строк.

• Snapshot task progress (top-50 tables) — количество строк, ожидающих переноса.

• Snapshot task status — выполняющаяся операция (0 — репликация, 1 — копирование).

Интеграция с Yandex Monitoring

Чтобы настроить алерты показателей состояния трансфера:

Рекомендуемые значения порогов для некоторых метрик: