Настройка drbd диска на девятой версии DRBD от Linbit.

Для создания реплицируемого диска нам необходимо 2 сервера. На каждом из них должен быть пустой раздел на жестком диске или целый жесткий диск. Также в компьютере желательно использовать 2 сетевые карты

Настроим сетевые адаптеры следующим образом

Сетевой интерфейс ens19 на каждом сервере мы будем использовать для прямого линка, а сетевой интерфейс eth0 будет использоваться для выхода в сеть.

DRBD работает по именам, по ip адресам он не работает.  Соотвественно, необходимо в файлах /etc/hosts на обеих серверах прописать соответсвие ip адресу его имя.

Глобальные настройки DRBD прописываются в файле etc/drbd.d/global_common.conf

В этом файле описываются настройки применимые ко всем конфигурациям. Описываются настройки сети, диска.

Подключение всех конфигурационных файлов описанов файле /etc/drbd.conf

В каждом сервере у нас есть по дополнительному жесткому диску /dev/sdb. Из них мы соберем реплицируемое блочное устройство.

Не будем создавать раздел, а возьмем весь диск.

Наш конфигурационный файл разместим в следующей директории:

/etc/drbd.d/r0.res

resource r0 {
 protocol C;
  on node1 {
    device    /dev/drbd1;
    disk      /dev/sdb;
    address   10.10.10.2:7789;
    meta-disk internal;
  }
  on node2 {
    device    /dev/drbd1;
    disk      /dev/sdb;
    address   10.10.10.1:7789;
    meta-disk internal;
  }
}

Рассмотрим подробно конфигурационный файл

1. Resource r0 – название нашего ресурса r0
2. Protocol C – номер протокола С

В DRBD есть 3 версии протокола A,B,C.

• A – Запись на устройство DRBD завершена, как только данные запишутся на локальный раздел, а также отправятся в буфер TCP/IP.
• B – Запись на устройство DRBD завершена, и все узлы подтвердили получение запросов на запись данных.
• С – Запись на устройство DRBD завершена, как только все удаленные узлы сообщат о том, что запись завершена

3. Далее идет описание первой ноды – on node1 (к этому имени мы еще вернемся ниже)
4. Device /dev/drbd1 – указываем какой блок данных необходимо создать
5. disk      /dev/sdb – указываем родительский жесткий диск
6. address   10.10.10.2:7789 – указываем ip адрес сервера
7. meta-disk internal – хранить метаданные на этом же устройстве.
8. Все по аналогии с первым сервером.

Этот конфигурационный файл должен быть одинаковый на двух серверах.

После проделанной работы можно попробовать создать ресурс, вводим команду:

# drbdadm create-md r0

При создании ресурса может возникнуть ошибка как на скриншоте. Это связано с тем, что DRBD начнет работать в том случае. Если имя хоста совпадает с с именем ноды в конфигурационном файле.

Для изменения имени воспользуемся следующей командой:

# hostnamectl set-hostname node1

И на втором сервере

# hostnamectl set-hostname node2

После изменения имени выполняем команду по созданию ресурса повторно на обоих серверах:

# drbdadm create-md r0

Далее не обеих нодах поднимаем запускаем ресурс drbdadm up r0

После чего можно проверить создание drbd1 блочного устройства

#lsblk 

Посмотрим статус drbd устройств:

# drbdadm status

Как видно из скриншота, пока оба сервера на объединены, также диски еще не готовы к работе.

Сделаем на одном из серверов ресурс r0 главным:

# drbdadm primary –force r0

Как видно из скриншота ресурс r0 стал Primary

Вторая нода в состоянии Secondary. Ниже показано, что идет синхронизация дисков. По окончании синхронизации мы увидим статус peer-disk: UpToDate. Это означает, что данные синхронизированы.

Далее на первичной ноде необходимо создать файловую систему на блочном устройстве /dev/drbd1

# mkfs.ext4 /dev/drbd1

После чего ресурс можно примонтировать и работать с ним.

# mount /dev/drbd1 /mnt 

Добавим drbd в автозагрузку:

Systemctl enable drbd

Перезагрузим второй сервер, который в состоянии Secondary

#reboot

После перезагрузки данные будут автоматически синхронизированы.

В этом случае обе ноды могут быть в состоянии Primary. Это происходит из-за того, что теряется связь между серверами и они друг о друге ничего не знают.

Решение этой проблемы заключается в следующем:

1.Одну из нод переводим в состояние Secondary
2.На этой же ноде отсоединяемся от ресурса

# drbdadm disconnect r0

3. Подсоединяемся к ресурсу с параметром «отпросить мои данные» , в этом случае произойдет синхронизация данных со вторым сервером.

# drbdadm connect –discard-my-data r0

 После чего произойдет востановление работы drbd.

Что касается расширения диска(в том случае, если у нас оба ресурса на виртуальной машине), то необходимо сделать несколько шагов:

1. C помощью утилиты fdisk или parted необходимо увеличить раздел

После чего необходимо на сервере со статусом Primary увеличить размер файловой системы командой:

# resize2fs /dev/drbd1

После чего размер блочного устройства drbd увеличится.