Size: a a a

Ceph — русскоговорящее сообщество

2021 January 06

ДД

Дмитрий Дятлов... in Ceph — русскоговорящее сообщество
Vladimir
Возможно как раз оно будет хорошо с медленными хранилищами работать типа моих
Ваша задача вообще за гранью...
источник

V

Vladimir in Ceph — русскоговорящее сообщество
Дмитрий Дятлов
Ваша задача вообще за гранью...
Почему? Вот mogilefs похоже именно под такиетзадачи и сделана. Для кого-то ведь это делалось
источник

ДД

Дмитрий Дятлов... in Ceph — русскоговорящее сообщество
Ceph поверх webdav.... А тут как бы могилафс, само по себе намекает
источник

V

Vladimir in Ceph — русскоговорящее сообщество
Дмитрий Дятлов
Ceph поверх webdav.... А тут как бы могилафс, само по себе намекает
да есть немного)
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Vladimir
да есть немного)
Я бы ставил на syncthing, но вот насчет поддержания числа реплик - хз
источник

V

Vladimir in Ceph — русскоговорящее сообщество
Виталий На Заборе
Я бы ставил на syncthing, но вот насчет поддержания числа реплик - хз
вообще первоначальный план был -
1) объединяю хранилища попарно и настраиваю репликацию мастера в слейв через рсинк например
2) мастеры объединяю водно хранилище через mhddfs
3) есть отваливается одно из мастер храилищ , то подключаю вместо него через mhddfs его слейв хранилище.
но в таком варианте замены мастера на слейв делать вручную, или свой софт писать.думал чтото готовое на эту тему найти.

то есть чтобы было скажем 10 хранилищ, и репликация щла в 3 хранилища. если одно отвалилось, то чтобы оно само ребалансировалось автоматически, или чтобы были hot swap хранилища на замену
источник

OO

Oleksandr Olgashko in Ceph — русскоговорящее сообщество
подскажите, а как посмотреть SLOW_OPS для mon (не osd) ?
для osd это ceph daemon osd.<id> ops / dump_historic_ops
источник
2021 January 09

n

nanomechanic in Ceph — русскоговорящее сообщество
можно как-нибудь по быстренькому поменять ip сеть на ceph кластере:
глючит IB свитч, часть IB партишенов работает как надо, а на патришене с CEPH хост [0] не пигнуется, хост [3] пингуется только с двух хостов [2] и [4]
можно не менять ничего в конфигах, а просто удалить подсеть цефовского кластера с сетевых интерфейсов, которые подключены к партишену с проблемой, переназначить IP-шники на интерфейс который работает ?
источник

ПС

Павел Савин... in Ceph — русскоговорящее сообщество
nanomechanic
можно как-нибудь по быстренькому поменять ip сеть на ceph кластере:
глючит IB свитч, часть IB партишенов работает как надо, а на патришене с CEPH хост [0] не пигнуется, хост [3] пингуется только с двух хостов [2] и [4]
можно не менять ничего в конфигах, а просто удалить подсеть цефовского кластера с сетевых интерфейсов, которые подключены к партишену с проблемой, переназначить IP-шники на интерфейс который работает ?
Сеть поменять нельзя просто так, надо mon пересоздавать/переконфигурировать. Monmap изменится.
источник

n

nanomechanic in Ceph — русскоговорящее сообщество
а IP-шники с одного  интерфейса на другой можно перекинуть ?
источник

ПС

Павел Савин... in Ceph — русскоговорящее сообщество
Если ip не изменятся, то можно.
источник

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
если кластенрую сеть то можно
источник

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
да и не кластреную тоже можно если ip монов не меняются
источник

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
просто добовляете еще сеть в конфиг
источник

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
переназначете на нодах и рестартите демоны
источник

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
главное чтоб между сетями трафик маршрутизировался
источник

n

nanomechanic in Ceph — русскоговорящее сообщество
вообще, хрень какая-то. есть шесть партишенов с pkey 0x200[123456], интерфейсы настроены на всех хостах, в UPе. iptables на них просто -i ib.a00+ -j ACCEPT. на трех из них (проксмоксовский кластер, OVS линки) трафик бегает, на трех нет. guid портов хоств члены партишенов. короч какой-то глюк мелланокса
источник

n

nanomechanic in Ceph — русскоговорящее сообщество
да, помогло
источник
2021 January 10

k

kiosaku in Ceph — русскоговорящее сообщество
Vladimir
Почему? Вот mogilefs похоже именно под такиетзадачи и сделана. Для кого-то ведь это делалось
для Livejournal-а
источник
2021 January 11

R

Roman in Ceph — русскоговорящее сообщество
Какие подводные камни могут быть при хранении миллиардов (на текущий момент их 1.5 и количество будет расти) файлов размером 1 кб - 1 Мб в cephfs на hdd? Под block.db будут sata ssd (обычные интелы dc 4510), на таких же будут mds.
Стоит ли использовать s3?
источник