VO
Size: a a a
2020 July 11
A
у меня примерно та же ситуация)))
A
Не помню, а интересуют именно иопсы или put rps?
да че угодно
VO
Put rps примерно 150
A
странно, не должно быть при решардинге проблем с такими рпс-ами
A
есть тут кто в курсе систора?
https://docs.ceph.com/docs/master/dev/seastore/
https://docs.ceph.com/docs/master/dev/seastore/
AG
Micron 5100
на sde запущено fio -ioengine=libaio -name=test -filename=/dev/sde -direct=1 -sync=1 -bs=40k -iodepth=3 -rw=rw -rwmixwrite=80
на остальных - osd
все теоретические иопсы вроде как не выжираются, но util 100%, кто-нибудь сталкивался?
на sde запущено fio -ioengine=libaio -name=test -filename=/dev/sde -direct=1 -sync=1 -bs=40k -iodepth=3 -rw=rw -rwmixwrite=80
на остальных - osd
все теоретические иопсы вроде как не выжираются, но util 100%, кто-нибудь сталкивался?
VO
Ну вот примерно с уровня 3.2м в бакете начинают срабатывать какие то таймауты и ргв становится нехорошо. Тот тайм-аут на который я думал и задрал до 7200 - оказался не причем
ВН
Aleksei Gutikov
Micron 5100
на sde запущено fio -ioengine=libaio -name=test -filename=/dev/sde -direct=1 -sync=1 -bs=40k -iodepth=3 -rw=rw -rwmixwrite=80
на остальных - osd
все теоретические иопсы вроде как не выжираются, но util 100%, кто-нибудь сталкивался?
на sde запущено fio -ioengine=libaio -name=test -filename=/dev/sde -direct=1 -sync=1 -bs=40k -iodepth=3 -rw=rw -rwmixwrite=80
на остальных - osd
все теоретические иопсы вроде как не выжираются, но util 100%, кто-нибудь сталкивался?
утилизация значит только то, что постоянно кто-то ждёт чего-то от диска, но ничего не говорит о режиме
VO
Мне микрон 5200 не понравился на запись - тормоз
AG
утилизация значит только то, что постоянно кто-то ждёт чего-то от диска, но ничего не говорит о режиме
ну ок, тогда svctm
A
Aleksei Gutikov
Micron 5100
на sde запущено fio -ioengine=libaio -name=test -filename=/dev/sde -direct=1 -sync=1 -bs=40k -iodepth=3 -rw=rw -rwmixwrite=80
на остальных - osd
все теоретические иопсы вроде как не выжираются, но util 100%, кто-нибудь сталкивался?
на sde запущено fio -ioengine=libaio -name=test -filename=/dev/sde -direct=1 -sync=1 -bs=40k -iodepth=3 -rw=rw -rwmixwrite=80
на остальных - osd
все теоретические иопсы вроде как не выжираются, но util 100%, кто-нибудь сталкивался?
1 osd на диск?
AG
1 osd на диск?
да
AG
утилизация значит только то, что постоянно кто-то ждёт чего-то от диска, но ничего не говорит о режиме
кстати, iops обратно пропорционально svctm, вроде
Ei
Ну вот примерно с уровня 3.2м в бакете начинают срабатывать какие то таймауты и ргв становится нехорошо. Тот тайм-аут на который я думал и задрал до 7200 - оказался не причем
есть же офф рекомендации по 100к объектов на бакет если не хотите проблем с производительностью
VO
Это вроде очень старое, до шардинга
A
Aleksei Gutikov
Micron 5100
на sde запущено fio -ioengine=libaio -name=test -filename=/dev/sde -direct=1 -sync=1 -bs=40k -iodepth=3 -rw=rw -rwmixwrite=80
на остальных - osd
все теоретические иопсы вроде как не выжираются, но util 100%, кто-нибудь сталкивался?
на sde запущено fio -ioengine=libaio -name=test -filename=/dev/sde -direct=1 -sync=1 -bs=40k -iodepth=3 -rw=rw -rwmixwrite=80
на остальных - osd
все теоретические иопсы вроде как не выжираются, но util 100%, кто-нибудь сталкивался?
а запусти фио с bs 4k
A
как будет вести себя
A
с 40к каждый могет
A
и rw=randrw