Проект развития Дальнего Востока в облаке: ФАНУ «Востокгосплан» в Yandex Cloud

Федеральное автономное научное учреждение «Восточный центр государственного планирования» (ФАНУ «Востокгосплан») выполняет научно‑исследовательские и экспертно‑аналитические работы в области социально‑экономического развития Дальнего Востока и Арктики.

Учреждение с нуля за два месяца развернуло облачную инфраструктуру в Yandex Cloud, что позволило быстро реализовывать научно‑исследовательские и аналитические проекты. С помощью облачных сервисов с 2021 года ФАНУ «Востокгосплан» реализовало уже 8 цифровых продуктов, один из которых — информационно‑аналитическая система «Дальний Восток».

ФАНУ «Востокгосплан» выполняет научно‑исследовательские и аналитические задачи, при решении которых необходимо работать с большим объёмом различной информации. В 2021 году было принято решение о цифровой трансформации учреждения. Нужно было создать с нуля инфраструктуру, которая позволила бы быстро разрабатывать и внедрять MVP‑продукты по анализу и визуализации данных силами сотрудников организации.

ФАНУ «Востокгосплан» — научное учреждение, подведомственное Министерству Российской Федерации по развитию Дальнего Востока и Арктики. Основные заказчики учреждения — федеральные и региональные органы исполнительной власти. Поэтому качество аналитических материалов должно быть высоким, при этом ФАНУ «Востокгосплан» должен применять российские продукты и сервисы и не превышать ограниченный бюджет.

Сначала ФАНУ «Востокгосплан» нужно было определиться с выбором инфраструктуры. Вариант с развёртыванием физических серверов отпал очень быстро. Во‑первых, для него потребовалось бы закупать промышленное оборудование и привлекать специалистов для технического сопровождения инфраструктуры, что не вписывалось в бюджет. Во‑вторых, учреждение планировало создать легко масштабируемое решение, что тяжело реализовать для физической инфраструктуры.

Облачное развёртывание подошло гораздо лучше. Гарантированное SLA и масштабируемость облачной инфраструктуры, а также разнообразие управляемых сервисов хранения и обработки данных позволяют снизить требования к компетенциям в области сопровождения инфраструктуры и создавать продукты быстрее, не отвлекаясь на закупку и обслуживание серверов.

Исследовав рынок облачных платформ, специалисты ФАНУ «Востокгосплан» остановили свой выбор на Yandex Cloud. Основными причинами были следующие:

• Набор сервисов платформы данных облачного провайдера максимально покрывает первичные задачи по аналитике данных, а также в перспективе даёт возможность автоматического сбора информации и внедрения ИИ в продукты.
• Есть сервис визуализации и анализа данных Yandex DataLens, который доступен бесплатно.
• Максимально бесшовное подключение сотрудников к облачным сервисам, так как ФАНУ «Востокгосплан» уже использует сервисы Яндекс 360.

На старте ФАНУ «Востокгосплан» развернул 4 базовых блока инфраструктуры в облаке, использовав сервисы Yandex Compute Cloud и Yandex Managed Service for PostgreSQL:

1. Виртуальные машины для используемого ПО с серверным размещением. Например, для имитационного моделирования.

2. Управляемый сервис БД для организации хранения структурированных данных.

3. Виртуальные машины для организации инфраструктуры разработчиков ПО (GitLab и стенды для развёртывания приложения).

4. Виртуальные машины для инфраструктурных сервисов: защищённое подключение к облачной сети (OpenVPN), мониторинг (Grafana).

Кроме инфраструктуры команда сразу начала внедрять сервис платформы данных Yandex DataLens. Этот инструмент визуализации данных доступный, интуитивно понятный аналитикам и не требующий привлечения IT‑специалистов.

По мере создания новых цифровых продуктов спектр использования облачных сервисов расширился. Сейчас команда ФАНУ «Востокгосплан» использует:

• 21 виртуальную машину, суммарно

  • Более 90 vCPU

  • Более 250 ГБ RAM

  • Более 2,5 ТБ HDD/SSD

• Managed Service for PostgerSQL, суммарно

  • 18 баз данных

  • 2 хоста

• Более 20 функций Yandex Cloud Functions, триггеров и очередей Yandex Message Queue

• Yandex DataLens

  • Более 100 дашбордов

  • Более 700 чартов

  • Более 750 датасетов

Сотрудники ФАНУ «Востокгосплан» эффективно работают в облачной инфраструктуре, что позволило с середины 2021 года создать уже 8 MVP‑проектов, в том числе финансовую модель «Инновационного научно‑технологического центра на о. Русский», геоаналитическую информационную систему по Дальнему Востоку и Арктике и информационно‑аналитическую систему «Дальний Восток». Каждый из проектов уникален и использует разные наборы облачных сервисов. Один из самых крупных проектов — ИАС «Дальний Восток». Цель создания этой системы — информационная поддержка государственного стратегического планирования и принятия текущих управленческих решений по вопросам социально‑экономического, демографического и территориального развития Дальнего Востока. Она помогает:

• Автоматизировать сбор данных из различных источников (Росстат, ЕМИСС, ручное внесение по формам и др.).

• Производить операционный и стратегический анализ в удобной форме.

• Ускорить поиск информации о показателях социально‑экономического развития субъектов РФ, входящих в состав Дальневосточного федерального округа.

Для создания информационно‑аналитической системы ФАНУ «Востокгосплан» дополнительно привлекло подрядчика. При разработке ИАС «Дальний Восток» использовали:

• Yandex DataLens — для разработки аналитических дашбордов с данными ИАС «ДВ».

• Yandex Managed Service for Postgre SQL — для реализации системы хранения, обработки и нормализации загружаемых данных и подготовки витрин данных.

• Object Storage — в качестве озера собранных сырых данных.

• Cloud Functions — для организации скачивания и парсинга данных из различных источников и формирования озера данных.

• Yandex Message Queue — для управления блочной обработкой и загрузкой данных из озера в БД.

ФАНУ «Востокгосплан» удалось всего за два месяца с помощью подрядчика, отвечавшего за процессы DevOps, с нуля построить масштабируемую облачную инфраструктуру в Yandex Cloud. Это позволило быстро разрабатывать научно‑исследовательские и аналитические проекты. С помощью облачных сервисов ФАНУ «Востокгосплан» реализовало уже 8 цифровых продуктов:

• Информационно‑аналитическая система «Дальний Восток».
• СМП‑прогноз — цифровая информационно‑аналитическая система поддержки принятия решений в области управления социально‑экономическим развитием Арктической зоны РФ.
• Цифровой двойник Северного завоза — информационная система для оптимизации стоимости, сроков и логистики поставки жизненно важных грузов в труднодоступные районы Дальнего Востока и Арктики.
• Агент‑ориентированная демографическая модель — информационно‑аналитическая система мониторинга и прогнозирования социально‑демографических процессов на Дальнем Востоке на уровне муниципальных образований, регионов и ДФО.
• Цифровая модель туристической отрасли.
• Финансовая модель «Единой дальневосточной авиакомпании».
• Финансовая модель «Инновационного научно‑технологического центра на о. Русский».
• Геоаналитическая информационная система по Дальнему Востоку и Арктике.