Документация VMmanager 6 (администратор)

Типы хранилищ

ISPSystem

Диск виртуальной машины (ВМ) является образом жёсткого диска. Он может находиться на локальном или сетевом устройстве — хранилище.

VMmanager поддерживает следующие форматы дисков ВМ:

  • RAW — содержит необработанные или обработанные в минимальной степени данные. В этом формате ВМ занимает столько места на диске, сколько для неё было выделено при создании;
  • Qcow2 — формат дискового образа программы QEMU. В этом формате место на диске, занимаемое ВМ, зависит от реального объёма данных на ней.

При создании кластера вы выбираете хранилища, которые будут в нём использоваться.

VMmanager поддерживает следующие типы хранилищ:

  • Файловое хранилище — файловая система ВМ;
  • LVM — менеджер логических томов. Позволяет использовать разные области одного жёсткого диска и/или области с разных жёстких дисков как один логический том;
  • Ceph — отказоустойчивое сетевое хранилище с распределённой файловой системой. Позволяет организовать масштабируемый кластер на нескольких узлах;
  • ZFS — файловая система с поддержкой большого объёма данных;
  • Сетевое LVM — LVM в сети хранения данных SAN. Узлы кластера работают с хранилищем как с блочным устройством по протоколу iSCSI.

Поддержка форматов для каждого типа хранилища в кластерах с KVM-виртуализацией:

Тип хранилища

RAW

Qcow2

Файловое хранилище

krest.png

galka.png

LVM

galka.png

krest.png

Ceph

galka.png

krest.png

Сетевое LVM

galka.png

krest.png

В кластерах с KVM-виртуализацией вы можете использовать файловое хранилище, LVM и Ceph, в кластерах с LXD-виртуализацией — только ZFS. К кластеру с KVM-виртуализацией можно подключить несколько хранилищ с разными типами. Например, вы можете создать кластер с двумя файловыми хранилищами, одним хранилищем LVM и одним хранилищем Ceph.

При создании кластера одно из хранилищ вы выбираете в качестве основного. Это хранилище будет использоваться по умолчанию для размещения ВМ. Если узел кластера потеряет доступ к основному хранилищу, VMmanager присвоит узлу статус "Повреждён".

Файловое хранилище


В качестве хранилища используется файловая система ВМ. Размер хранилища ограничивается одним разделом одного диска.

При выборе этого типа хранилища вы можете указать:

  • название хранилища;

Обратите внимание!

Имена директорий на всех узлах кластера должны быть одинаковые.

LVM


Менеджер логических томов (LVM) — подсистема, позволяющая использовать разные области одного жёсткого диска и/или области с разных жёстких дисков как один логический том.

Размер файловых систем логических томов не ограничивается одним диском, так как том может располагаться на разных дисках и разделах.

Основные обозначения LVM:

  • физический том (PV) — раздел диска или диск целиком;
  • группа томов (VG) — набор физических томов, объединённый в одно виртуальное устройство;
  • логический раздел (LV) — раздел, созданный в группе томов.

При выборе этого типа хранилища вы можете указать:

  • название хранилища;

Обратите внимание!

Имена групп томов и директорий для хранения на всех узлах кластера должны быть одинаковые.

При добавлении узла в кластер с LVM VMmanager считает количество VG на узле и ищет VG с указанным именем:

  • если есть одна или несколько VG с подходящим именем, то узел будет добавлен;
  • если нет ни одной VG, то будет выведена ошибка и добавление узла завершится;
  • если есть одна VG с другим именем, то VMmanager предложит переименовать её;
  • если есть несколько VG и ни одной с подходящим именем, то VMmanager выведет ошибку и предложит переименовать их вручную. Добавление узла завершится.

Хранилище LVM может поддерживать только формат образа виртуальных дисков RAW. Подробнее об LVM см. в официальной документации.

Ceph


Ceph — отказоустойчивое сетевое хранилище с распределённой файловой системой.

С помощью Ceph вы можете организовать масштабируемый кластер узлов. При выходе из строя любого диска, узла или группы узлов Ceph автоматически восстанавливает копию утраченных данных на других узлах. Процесс восстановления данных не вызывает простоя в работе кластера.

Ceph предоставляет для клиента различные варианты доступа к данным: блочное устройство, файловая система или объектное хранилище. VMmanager поддерживает RBD — распределённое блочное устройство с клиентом kernel и QEMU/KVM драйвером. При использовании RBD виртуальные диски распределяются на несколько объектов и в таком виде хранятся в распределённом хранилище Ceph (RADOS). RBD поддерживает только формат образа виртуальных дисков RAW.

Существует два способа хранения данных в Сeph RBD: репликация (replication) и избыточность (erasure). Выбранный способ определяет размер частей данных и количество их копий.

При репликации создаются копии входящих данных — реплики. Реплики хранятся на разных узлах кластера.

При избыточности входящие данные разбиваются на K частей одинакового размера. Дополнительно создаётся M частей того же размера для восстановления данных. Все части распределяются среди K+M узлов кластера — одна часть на узел кластера. Кластер будет поддерживать работоспособность и сохранность данных, пока количество отказавших узлов меньше или равно M.

Функциональность и работоспособность Ceph-кластера поддерживается Ceph-службами:

  • MON — служба мониторинга;
  • OSD — служба хранилища;
  • MDS — сервер метаданных. Необходим, только в случае использования CephFS.

В небольших кластерах допускается использование одного сервера в качестве двух ролей, например, в качестве хранилища данных, а также в качестве монитора. В больших кластерах рекомендуется запускать службы на отдельных серверах.

Подробнее о подключении Ceph см. в разделе Настройка Ceph RBD.

ZFS


ZFS — это файловая система, объединённая с менеджером логических томов. Преимущества ZFS:

  • работа с файлами и разделами больших размеров;
  • возможность хранения файлов на нескольких устройствах;
  • проверка контрольных сумм и шифрование файлов "на лету";
  • возможность создания снапшотов.

Подробнее о ZFS см. в официальной документации.

ZFS использует виртуальные пулы хранения данных. Пул создаётся из виртуальных устройств — физических дисков или RAID-массивов.

VMmanager использует ZFS только в кластерах с LXD-виртуализацией. Образы ВМ хранятся на узле кластера, LXD-контейнеры с ВМ и операционные системы — в пуле ZFS.

Перед подключением сервера к кластеру на сервере нужно настроить ZFS-пул:

  1. Перед установкой ОС оставьте на диске сервера неразмеченное пространство.
  2. Установите утилиту zfsutils-linux:

    sudo apt install zfsutils-linux
  3. Создайте ZFS-пул: 

    zpool create <zpool_name> <device>

    <zpool_name> — имя пула

    <device> — имя раздела

Сетевое LVM


Для подключения сетевых LVM-хранилищ VMmanager использует сети хранения данных SAN. SAN (Storage Area Network) — технология для подключения внешних устройств хранения данных к серверам. Операционные системы серверов работают с подключёнными устройствами как с локальными: узлы кластера определяют хранилище как блочное устройство. Особенности технологии позволяют выполнять миграцию ВМ без остановки.

VMmanager автоматически настраивает LVM-хранилище на блочном устройстве: создаёт PV и VG.

Спасибо за ваш отзыв!
Была ли полезна статья?
Уточните, почему:

статья не соответствует названию

статью сложно понять

в статье нет ответа на мой вопрос

рекомендации из статьи не помогли

другая причина

Расскажите, что вам не понравилось в статье: