k
и что за диски
Size: a a a
2019 September 22
O
Самсунги sata, кажется SM863
O
По 5-6 дисков на ноду
k
А сколько нод?
O
На вм скорость линейного чтения записи виртуального диска плюс минус 450, этого хватает пока.
k
На вм скорость линейного чтения записи виртуального диска плюс минус 450, этого хватает пока.
А рандомного? :)
O
Рандомное быстрее чем у физического тазика с одним таким же ssd
k
Я тестил Ceph на 45 нодах с 1 nvme на каждой, 10g сеть. Гонял стресс тесты. В итоге пришлось от него отказаться, в виду того что osd очень сильно потребляют процессорного времени при записи начиная с какого-то момента CPU уходил в 100% и Ceph переставал отвечать на хоть какие-то запросы
k
При умеренной нагрузке Ceph работал, но слишком медленно по сравнению с локальными накопителями
O
Не вижу такого. Запас cpu есть
O
Один диск на ноду мало.
k
Не вижу такого. Запас cpu есть
Либо у вас очень мощные процы, либо вы упираетесь в скорость дисков, либо ваши тесты не достаточно масштабные :)
O
А как мигрировать если стораджи локальные
O
Процы 12ведерные.
k
Один диск на ноду мало.
А какая разница? - чем больше нод, тем должно быть лучше
k
В этом смысл Ceph
O
Юниты и порты тоже денег стоят
k
А как мигрировать если стораджи локальные
Никак, просто локальный сторадж - это эталон, с которым сравнивалось, насколько то или иное решение будет медленнее работать
k
Короче, для себя я понял, что при хоть сколько-нибудь интенсивной записи и если у тебя нет 100500 нод отведённых чисто под Ceph, работать это будет как ни крути медленно.