Size: a a a

SDS и Кластерные FS

2019 June 27

AP

Andrew P in SDS и Кластерные FS
ну, cluster manager требуется для NFS сервера всё равно, а виртуалок у нас там больше не будет - только NFS контейнер, и гибкость вообще не нужна
источник

k

kvaps in SDS и Кластерные FS
А под что хранилка тогда?
источник

AP

Andrew P in SDS и Кластерные FS
хранилка под наши научные данные (примерно 10TB) на нескольких NFS-томах, считающие ноды их монтируют и обрабатывают
источник

k

kvaps in SDS и Кластерные FS
>3. Какую операционку и какой софт для кластеризации лучше выбирать для нод?
Мне нравится проксмосовский ha-manager юзать в купе с LXC в качестве софта для кластеризации
источник

k

kvaps in SDS и Кластерные FS
Andrew P
хранилка под наши научные данные (примерно 10TB) на нескольких NFS-томах, считающие ноды их монтируют и обрабатывают
Понял, то есть вам нужна именно фс
источник

AP

Andrew P in SDS и Кластерные FS
да, от хранилища нужна простая и надёжная разделяемая FS и чтобы по минимуму движущихся частей 😊
источник

k

kvaps in SDS и Кластерные FS
А ноды считают не постоянно? Что с данными происходит после просчёта?
источник

AP

Andrew P in SDS и Кластерные FS
почти постоянно, каждые 6 часов считается очередной цикл прогноза 24/7/365
источник

k

kvaps in SDS и Кластерные FS
Насколько важна производительность и отказоустойчивость?
источник

AP

Andrew P in SDS и Кластерные FS
очень важны
впрочем, производительность текущей конфигурации устраивает, не устраивает отказоустойчивость
источник

k

kvaps in SDS и Кластерные FS
Понял, хотел посоветовать beegfs но она не очень надёжна
источник

k

kvaps in SDS и Кластерные FS
Есть ещё rozofs но она не настолько быстрая как drbd+nfs
источник

k

kvaps in SDS и Кластерные FS
Как вариант можно ещё попробовать lustre поверх drbd
источник

k

kvaps in SDS и Кластерные FS
Но если объема одного сервера вам хватает, то лучше остаться на nfs, ибо так проще
источник

k

kvaps in SDS и Кластерные FS
А простота - залог успеха)
источник

k

kvaps in SDS и Кластерные FS
Ещё можно просмотреть в сторону s3 хранилищ, minio например. В нынешнем мире хранить что-то на фс - моветон
источник

k

kvaps in SDS и Кластерные FS
Но опять же minio не будет быстрее
источник

AP

Andrew P in SDS и Кластерные FS
вот да, я хочу сделать максимально просто на проверенных решениях, эта штука сугубо в продакшен и по сути является ядром
источник

AP

Andrew P in SDS и Кластерные FS
а вариант с железячной хранилкой чем-то хуже DRBD?
источник

AP

Andrew P in SDS и Кластерные FS
kvaps
Ещё можно просмотреть в сторону s3 хранилищ, minio например. В нынешнем мире хранить что-то на фс - моветон
Про хранение объектов вместо файлов я понимаю, но это требует довольно существенной переработки всего стека. Мы постепенно в эту сторону идём, но пока не готовы
источник