IH
на следующей неделе опубликую вторую
О чем будет?
Size: a a a
2019 May 12
GG
А почему не просто drbd раскатать?
потому что раньше дрбд был дно
k
О чем будет?
Про linstor и про возможность его использования с OpenNebula
k
Я написал драйвер linstor_un, буду про него рассказывать
GG
2019 May 13
AP
Коллеги, есть вопрос. Нужно сделать небольшое отказоустойчивое хранилище, объем около 500GB. Сервисы которые его используют живут на серверах в контейнерах, в качестве псевдо-оркестратора используется docker-compose. Необходимо чтобы это было единое файловое пространство, разделяемое всеми контейнерами. Есть 3 ноды под хранилище, сеть задублирована через bonded NIC. Я когда-то такое делал на DRBD8, раздача по NFS, под управление стека на Pacemaker. Сейчас я планирую это делать на DRBD9+NFS, управлять тем же Pacemaker. Есть ли какие-то лучше решения?
G
Вспомним прошлое, когда во всю был популярен DRBD8 и стандартное его использование подразумевало создание одного большого блочного устройства, и нарезание его на много маленьких кусочков, при помощи того же LVM. Эдакий mdadm RAID-1 но с репликацией по сети.
Такой подход не лишен недостатков, и поэтому с приходом DRBD9 принципы построения хранилища поменялись, теперь под каждую виртуалку создается отдельное DRBD-устройство.
Подход с независимыми блочными устройствами позволяет лучше утилизировать пространство в кластере, а так-же добавляет ряд дополнительных возможностей. К примеру для каждого такого устройства можно определять количество реплик, их расположение и индивидуальные настройки. Их легко создавать/удалять, делать снапшоты, изменять размер, включать шифрование и многое другое. Стоит заметить что DRBD9 так же поддерживает кворум.
Такой подход не лишен недостатков, и поэтому с приходом DRBD9 принципы построения хранилища поменялись, теперь под каждую виртуалку создается отдельное DRBD-устройство.
Подход с независимыми блочными устройствами позволяет лучше утилизировать пространство в кластере, а так-же добавляет ряд дополнительных возможностей. К примеру для каждого такого устройства можно определять количество реплик, их расположение и индивидуальные настройки. Их легко создавать/удалять, делать снапшоты, изменять размер, включать шифрование и многое другое. Стоит заметить что DRBD9 так же поддерживает кворум.
У меня ещё на тестах 1 блочное устройство не особо паралеллилось на диски, то есть 1 блочное на 40 дисков в 1 ядро упрётся. Решение - резать на разные устройства.
k
У меня ещё на тестах 1 блочное устройство не особо паралеллилось на диски, то есть 1 блочное на 40 дисков в 1 ядро упрётся. Решение - резать на разные устройства.
о том и речь
k
А, я не так понял, да, это действительно может быть проблемой
k
а какая версия drbd была?
G
а какая версия drbd была?
9, точнее с наскоку не скажу
k
понял, главное что не 8
G
так что по умолчанию я бы рекомендовал собирать 1 drbd device из 2х дисков, и уже при желании выше с помощью lvm/zfs их объединять по надобности (привет linstor)
G
мне в linbit не понравилось, что при запуске linstor они документацию о ручной настройке drbd9 куда-то закопали, долго возился в итоге. Не приятно.
GG
мне в linbit не понравилось, что при запуске linstor они документацию о ручной настройке drbd9 куда-то закопали, долго возился в итоге. Не приятно.
нет ли в этом происков маркетастов?
G
нет ли в этом происков маркетастов?
не происки, а целенаправленные действия, тащемта
k
мне в linbit не понравилось, что при запуске linstor они документацию о ручной настройке drbd9 куда-то закопали, долго возился в итоге. Не приятно.
Working with DRBD?
https://docs.linbit.com/docs/users-guide-9.0/#p-work
https://docs.linbit.com/docs/users-guide-9.0/#p-work
k
просто у них одна дока на всё - не удобно
G
Working with DRBD?
https://docs.linbit.com/docs/users-guide-9.0/#p-work
https://docs.linbit.com/docs/users-guide-9.0/#p-work
Из того, что вспомню:
- всё, что реализуется в linstor, в этой доке уже нет, я находил обрывки для drbd8 (конкретно - ha через pacemaker)
- раздел про производительность особо тоже не поможет, 2 главных момента для меня - нужно дробить на устройства (выше описал уже), и руками тюнить скорость resilver, тоже не особо очевидно. То есть вот вроде ман для запуска, но то, что получится - для прода не годно
- всё, что реализуется в linstor, в этой доке уже нет, я находил обрывки для drbd8 (конкретно - ha через pacemaker)
- раздел про производительность особо тоже не поможет, 2 главных момента для меня - нужно дробить на устройства (выше описал уже), и руками тюнить скорость resilver, тоже не особо очевидно. То есть вот вроде ман для запуска, но то, что получится - для прода не годно
G
ИМХО ессно)