Типы хранилища
Managed Service for ClickHouse позволяет использовать для кластеров баз данных сетевое и локальное хранилища. Сетевое хранилище реализовано на базе сетевых блоков — виртуальных дисков в инфраструктуре Yandex.Cloud. Локальное хранилище организуется на дисках, которые физически размещаются в серверах хостов БД.
При создании кластера вы можете выбирать между следующими типами хранилища:
- Стандартное сетевое хранилище (
network-hdd) — самый дешевый вариант, для кластеров, не требовательных к скорости записи и чтения. - Быстрое сетевое хранилище (
network-ssd) — компромиссный вариант: медленнее, чем локальное хранилище, но, в отличие от локальных дисков, обеспечивает сохранность данных при выходе из строя оборудования Yandex.Cloud. - Быстрое локальное хранилище (
local-ssd) — самые быстрые диски. Объем локального хранилища можно наращивать только с шагом 100 ГБ.
- Гибридное хранилище — компромиссный вариант. Часто используемые «горячие» данные хранятся на дисках сетевого хранилища, редко используемые «холодные» данные — в объектном хранилище Yandex Object Storage.
Особенности локального хранилища
Локальное хранилище не обеспечивает отказоустойчивости хранения данных, а также влияет на тарификацию кластера в целом:
- Локальное хранилище в кластере из 1 хоста не обеспечивает отказоустойчивости: при отказе локального диска данные теряются безвозвратно. Поэтому при создании нового кластера Managed Service for ClickHouse с использованием локального хранилища автоматически настраивается отказоустойчивая конфигурация из 2 хостов.
- Кластер с локальным хранилищем тарифицируется, даже если он остановлен. Подробнее — в правилах тарификации.
Особенности гибридного хранилища
Примечание
Гибридное хранилище находится на стадии Preview. Плата за использование хранилища Object Storage не взимается.
На стадии Preview разрешается использовать этот тип хранилища только в кластерах с выключенной отказоустойчивостью. В такоми кластере хосты ZooKeeper не добавляются и в каждом шарде можно разместить только один хост ClickHouse. На стадии General Availability это ограничение будет снято.
Гибридное хранилище обеспечивает отказоустойчивость хранения данных и управление их размещением: данные автоматически перемещаются между сетевым и объектным хранилищем в зависимости от частоты использования.
Использование такого типа хранилища налагает следующие ограничения на кластер Managed Service for ClickHouse:
- Минимальная версия ClickHouse в кластере: 20.6.
- Тип хранилища для часто запрашиваемых «горячих» данных: стандартное или быстрое сетевое хранилище. Быстрое локальное хранилище не поддерживается.
- В любой шард кластера нельзя будет добавить более одного хоста.
Для того, чтобы начать использовать гибридное хранилище, достаточно создать кластер нужного вида. Настройка объектного хранилища не требуется.