это же гобенч, он тестит по 1 осд

а бллин

а что надо, фио в один поток?

не меня реальная нагрузка а не бенчи интресуют

если cephfs то небось вообще надо какой-нить iometer

фио умеет в файлы

ceph osd pool stats

или что там есть

а, ну или так, да

# fio -ioengine=libaio -size=10G -direct=1 -name=test -bs=4k -iodepth=1 -rw=randwrite -runtime=60 -filename=./testfile
test: (g=0): rw=randwrite, bs=(R) 4096B-4096B, (W) 4096B-4096B, (T) 4096B-4096B, ioengine=libaio, iodepth=1
fio-3.1
Starting 1 process
test: Laying out IO file (1 file / 10240MiB)
fio: native_fallocate call failed: Operation not supported
Jobs: 1 (f=1): [w(1)][100.0%][r=0KiB/s,w=1841KiB/s][r=0,w=460 IOPS][eta 00m:00s]
test: (groupid=0, jobs=1): err= 0: pid=8129: Fri Jul  3 19:17:50 2020
 write: IOPS=462, BW=1849KiB/s (1893kB/s)(108MiB/60001msec)
   slat (usec): min=9, max=1644, avg=52.75, stdev=27.15
   clat (usec): min=858, max=137841, avg=2103.29, stdev=4076.17
    lat (usec): min=902, max=137933, avg=2156.92, stdev=4076.11
   clat percentiles (usec):
    |  1.00th=[  979],  5.00th=[ 1057], 10.00th=[ 1106], 20.00th=[ 1156],
    | 30.00th=[ 1205], 40.00th=[ 1237], 50.00th=[ 1254], 60.00th=[ 1303],
    | 70.00th=[ 1352], 80.00th=[ 1467], 90.00th=[ 1860], 95.00th=[ 7504],
    | 99.00th=[18744], 99.50th=[25822], 99.90th=[54789], 99.95th=[62653],
    | 99.99th=[87557]
  bw (  KiB/s): min=  560, max= 2384, per=100.00%, avg=1848.67, stdev=365.07, samples=120
  iops        : min=  140, max=  596, avg=462.15, stdev=91.27, samples=120
 lat (usec)   : 1000=1.72%
 lat (msec)   : 2=89.23%, 4=2.47%, 10=3.19%, 20=2.50%, 50=0.74%
 lat (msec)   : 100=0.14%, 250=0.01%
 cpu          : usr=0.65%, sys=2.79%, ctx=36332, majf=0, minf=9
 IO depths    : 1=100.0%, 2=0.0%, 4=0.0%, 8=0.0%, 16=0.0%, 32=0.0%, >=64=0.0%
    submit    : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
    complete  : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
    issued rwt: total=0,27733,0, short=0,0,0, dropped=0,0,0
    latency   : target=0, window=0, percentile=100.00%, depth=1

Run status group 0 (all jobs):
 WRITE: bw=1849KiB/s (1893kB/s), 1849KiB/s-1849KiB/s (1893kB/s-1893kB/s), io=108MiB (114MB), run=60001-60001msec

а он умеет много файлов херачить?

много потоков умеет точно

много потоков нинужно, для этого iodepth есть

много потоков это только для операций с фс релевантно

(label_replace((rate(ceph_pool_rd{pool_id=~"[[pool_id]]"}[1m]) + rate(ceph_pool_wr{pool_id=~"[[pool_id]]"}[1m])),"id", "$1", "pool_id", "(.*)") + on(pool_id) group_left(instance,name) ceph_pool_metadata{pool_id=~"[[pool_id]]"})

или в проме вот что—то типа того

вот, больше реальной нагрузки сейчас нету

ну тоже ок, 7-7к для 12 блинов тоже збс

на самом деле это плюс-минус тестовый кластер, надо было большому клиенту куда-то деть его статику

а самим понять, какое железо нужно и как все конфигурить, чтобы потом строить что-то большее

попозже еще рбд добавим сюда, тоже погоняем