I was really against online stuff at first until I decided to give it a try. Mr Harley Perkins made me to see the light in through him. I’m really happy I did because it changed my life, a trusted and experienced man with the attitude of a good father. His a Godly man, I can vouch for him. Hit him up today and you will glad you did...
https://t.me/joinchat/AAAAAFCCcbwK0XK59K2aFw

@SinTeZoiD @socketpair

Ceph Orchestrator Meeting 2020-06-08 meeting recording is now available: https://youtu.be/M6gS-gvxpek

короче в итоге думаю, что дело в хилом десктопном железе, на котором гонял. проверил на тредрипперах - там такого прикола нет. по-видимому, реально то ли это чипсетный PCIe, в который у меня 10г карты воткнуты, так тормозит, то ли просто в целом хилые процы (AMD kaveri/godavari). ещё кстати проверил на них же с рамдиском - с рамдиском такого прикола нет :) и ещё проверил с NVMe-шкой - с ней есть :) то есть воспроизводится именно когда идёт I/O то в сеть, то в реальный диск (и sata, и nvme)

либо может чипсет прерывания модерирует, либо что-то типа того

может не чипсет, а драйвер сетевой карты? одно прерывание на несколько пакетов или вообще polling - это распространенная штука для увеличения пропускной способности. Попробуйте сделать modinfo на модуль, поддерживающий вашу сетевую карту, поищите Interrupt Delay (на ixgb он точно есть, но не знаю, как там по умолчанию)

я это всё поотрубал

ethtool -C enp5s0f1np1 rx-usecs 0
ethtool -K enp5s0f1np1 gro off gso off tso off lro off sg off
ethtool -A enp5s0f1np1 rx off tx off

и ещё опции модуля... (solarflare)

options sfc performance_profile=latency interrupt_mode=0 lro=0 rss_cpus=cores irq_adapt_enable=0 rx_ring=2048 tx_ring=2048

сам модуль откуда брали? в том, что идет с ядром 5.6.15, части опций выше нет

из опенонлоада

давайте вы все-таки перепробуете со стоковым (естественно, без плохих опций)

да без проблем, но там всё то же самое было

да то же самое всё - на клиенте 146us, на сервере 53us, при этом sockperf pp -m 4096 - среднее 27us, а если бенчить сервер-заглушку - то клиент видит 49us

жылезо это, жылезо

чувствую что ты нашел скорость mmalloc

?

а не, хуйню сказал

в раме то всё ок