Понял
Спасибо коллега!)
Буду тестить

Народ, можно по ZFS совета спросить? Собрал свежий сервак на Supermicro под standalone proxmox: Xeon 4210, 128GB RAM, LSI HBA SAS 9300-8i, Seagate 2400GB SAS 10k RPM x 10, Optane 900p 480GB итд. HBA в IT режиме. Поставил свежий прокс, выбрал raidz2. Теперь тестирую производительность с помощью fio. И получается, что у меня нет разницы в скорости/иопсах с кешем на ssd или без. Параметры fio: rw=rw size=10g numjobs=16 bs=4k. Прогоняю с массивом без подключенного кеша - получаю 630 MB/s / 40 MB/s. Добавляю кеш в массив - примерно те же цифры, разброс не более 5%, что, можно сказать, укладывается в погрешность измерения. ЧЯДНТ?

спрашивай, если кто что может ответить - то ответят)

https://t.me/ru_zfs
напиши что за кэш то.

L2arc, на оптане

О у меня таже фигня была. L2ARC на SSD просто

Я не смог ее победить

а что ожидается от кеша то? оно ж наверняка в arc уже

а для ускорения записи slog нужен, а не l2arc

l2arc этож кэш на чтение, а меряете fio на запись. поправьте знающие, если я не прав.

да

L2arc поможет только с рандомом и когда не хватает озу для arc. Лучше на allocation classes гляньте.

может для начала slog включить?)

Zil на том же ссд раздел, читал что для оптанов размещение zil и l2arc рядом не критично для скорости

хм, ну тогда 40 маловато как-то

а что показывает iostat, во что утыкается?

и какой полиси для кеша стоит в zfs

Вроде читает тоже

Run status group 0 (all jobs):
   READ: bw=45.4MiB/s (47.6MB/s), 45.4MiB/s-45.4MiB/s (47.6MB/s-47.6MB/s), io=3070MiB (3219MB), run=67631-67631msec
  WRITE: bw=15.2MiB/s (15.9MB/s), 15.2MiB/s-15.2MiB/s (15.9MB/s-15.9MB/s), io=1026MiB (1076MB), run=67631-67631msec

size=10g вероятно успешно влезает в arc