ДД
как этого добиться?)
Если по существу, разбираться где зависает и почему, искать проблемы в реализации, в клиентском софте. В серверном софте. Сделать багрепорты.
Size: a a a
2020 June 06
ДД
На крайний случай написать свою самую идеальную систему, которая будет работать всегда и везде )
V
ну это да
ВН
только в этом и вижу плюс s3, получать ошибку по таймауту а не падать и не виснуть в попытках сохранить файл на диск
Да оно вообще и быстрее будет как бы
V
Да оно вообще и быстрее будет как бы
А почему быстрее
2020 June 07
ВН
Прослоек меньше...
ВН
Там где можно юзать для распределённого хранилища файлов S3, лучше юзать S3. Если можно не S3 а вообще голый радос - то лучше голый радос )))
V
Для множества мелких файлов вроде не очень сеф? Большой оверхед для хранения метадаты
V
Для отчетов всяких ворд.пдф
ВН
cephfs fuse: приложение - ядро - fuse - mds - osd
S3: приложение - rgw - osd
А вот голый радос: приложение - сразу osd
Вот голый радос лучше всего конечно :)
S3: приложение - rgw - osd
А вот голый радос: приложение - сразу osd
Вот голый радос лучше всего конечно :)
ВН
Правда в cephfs зато получается что трафик не льётся через rgw, а льётся напрямую на osd
ВН
Для множества мелких файлов вроде не очень сеф? Большой оверхед для хранения метадаты
Для таких нормально думаю, как раз
ВН
Для совсем мелких типа < 64 кб наверное не очень
ВН
Но это уже не ФС, а база данных какая-то
V
Cephfs пока кажется лучше подходит
ВН
Хотя вон Мамахтёнок держит вроде на cephfs Maildir
МК
Правда в cephfs зато получается что трафик не льётся через rgw, а льётся напрямую на osd
Надо для с3 вот какую хуйню сделать: на каждом ноде поднимать ргв. А на главном ргв куда все клиенты ходют 302 редиректить на тот нод где соотв. Осд. Тогда тот ргв на локалхост срать будет. Но иногда по сети если рейскондишн с определением нода. Тогда будет условно как в цеффс
IF
Для множества мелких файлов вроде не очень сеф? Большой оверхед для хранения метадаты
можно размер "блока" уменьшить
IF
Для совсем мелких типа < 64 кб наверное не очень
можно и меньше
N
да s3 круто, но это приложения дорабатывать, а их много, сейчас умеют только под себя в папку писать
Почему тогда рассматриваете только rbd vs s3, а не cephfs? Нагрузка большая?