Size: a a a

Ceph — русскоговорящее сообщество

2020 June 27

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
ты можешь выкрутить количество бекфилов на осд
источник

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
чтоб бекфилилось больше одновременно
источник

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
Vyacheslav Olkhovchenkov
recovery: 32 MiB/s, 67 objects/s
ой чувствую еще долго ждать
но если у тебя вот такой рекавер ипактит среду у меня для тебя плохие новости
источник

VO

Vyacheslav Olkhovche... in Ceph — русскоговорящее сообщество
у меня он не среду импактит. он импактит меня и то что оставшихся два pg на пуле который мигрируется на ssd пока все еще в bakfil wait
источник

VO

Vyacheslav Olkhovche... in Ceph — русскоговорящее сообщество
"В итоге мы пришли к разработке нашей собственной системы под рабочим названием Flussonic RAID. Администратор сервера монтирует все жёсткие диски отдельно, зависимостей между ними нет, а метаданные размещаются на отдельном SSD. Видео равномерно распределяется по этим дисками отдельными, никак не связанными, фрагментами, и, соответственно, в случае сбоя максимум, что мы теряем - это данные на одном конкретном диске и отдельные фрагменты одного видео. Для нас самое главное, что даже если 9 из 10 дисков выйдет из строя, 10 всё равно будет работать, и данные с него никуда не пропадут. Система масштабируется: можно купить сервер с 20 слотами для жёстких дисков и гибко расширяться, докупая их по мере необходимости."
источник

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
Vyacheslav Olkhovchenkov
у меня он не среду импактит. он импактит меня и то что оставшихся два pg на пуле который мигрируется на ssd пока все еще в bakfil wait
ну подними osd_max_backfills до 2 и все рассосеться
источник

VO

Vyacheslav Olkhovche... in Ceph — русскоговорящее сообщество
Alexander mamahtehok
ну подними osd_max_backfills до 2 и все рассосеться
не думаю.
            56   active+remapped+backfill_wait
            39   active+remapped+backfilling
вот которые в вайт ломанутся, это да.
скорость рекавери не поменяется скорее всего.
источник

D

Dimm in Ceph — русскоговорящее сообщество
Denis Kondratenko
а почему MTU меняется?
Ну например приезжает экскаватор и перерубает нашу оптику с MTU=9000, идущую к одному из универов. И при отсутствии других вариантов роутинг меняется на commodity internet, с MTU=1500
источник

D

Dimm in Ceph — русскоговорящее сообщество
В худшем случае MTU меняется не для всех узлов, а для некоторых (например если есть другой быстрый линк в соседний универ, но нету линка дальше), сеф это просто не выносит - тогда эти ноды не становятся offline, но при этом не могут синхронизироваться с некоторыми другими, там адские ошиюки получаются. Пока все не восстановится, все висит намертво. Но такое редко бывает
источник

DK

Denis Kondratenko in Ceph — русскоговорящее сообщество
ясно, у нас тоже были проблемы со stretched cluster, когда половина в одном месте, половина в другом, но кастомер дружно кричал что линк очень крутой. пока он не упал
источник

ДД

Дмитрий Дятлов... in Ceph — русскоговорящее сообщество
потестил, результат в файле
источник

D

Dimm in Ceph — русскоговорящее сообщество
Хы ) ну да.. но у нас никто ничего не гарантирует, так что это как бы ок. Студенты и учёные просто терпят если что
источник

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
Dimm
Хы ) ну да.. но у нас никто ничего не гарантирует, так что это как бы ок. Студенты и учёные просто терпят если что
хорошо вам 😁
источник

ДД

Дмитрий Дятлов... in Ceph — русскоговорящее сообщество
Dimm
Хы ) ну да.. но у нас никто ничего не гарантирует, так что это как бы ок. Студенты и учёные просто терпят если что
Зачем терпеть? Лучше одинаково MTU сделать. Тем более что профита от MTU особо нет, для ceph как тут писали, иногда даже наоборот.
источник

D

Dimm in Ceph — русскоговорящее сообщество
Да, я уже сам думаю 1500 везде сделать.. а что профита нет не знал
источник

ДД

Дмитрий Дятлов... in Ceph — русскоговорящее сообщество
Ну и можно по чату поискать.
источник

ДД

Дмитрий Дятлов... in Ceph — русскоговорящее сообщество
Переслано от Денис Андреев...
mtu 9200 switch, а на портах 9000
раньше был 1500, по ощущениям ничего не поменялось
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
"По ощущениям" это ни о чём
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Когда результаты бенчей будут, тогда поговорим
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
У меня на линейном в пределах 10% выгоды получалось таки
источник