AD
На Mellanox’овском свитче все тоже настраивается очень просто - включаешь PFC и 3 и 4 классы траффика.
Size: a a a
2021 June 03
AD
поэтому, если карты поддерживают, не вижу причин не попробовать
KS
а прошивки/драйверы карт mellanox надо из HCL по RDMA пользовать ?
AD
чтобы все было на поддержке - конечно, но в лабе я не заморачивался. Прошивку даже не проверял. А драйвер правильный:)
na
25% в сравнении с чем?
N
в сравнении с без RDMA 🙂
AD
с таким же паттерном без RDMA
KS
а какой то общей доки еще нет по настройке всего ?
na
гм.. если при одинаковой пропускной способности сети max 25%, то в чем профит?)
N
профит в 25%?
na
причем это вырожденный тест, 4к, 100% read. какое он имеет отношение к реальности?
na
не вижу профита, для того чтобы менять оборудовании (карты и возможно коммутаторы)
N
А разве кто-то призывает вас менять оборудование?
KS
ну тут надо понять что в принципе дает rdma, для начала
na
для перехода на rdma многим потребуется я полагаю
AK
колхоз - дело добровольное...
AD
там в принципе со стороны vSphere настраивать особо нечего. Просто одной кнопкой включается.
Вот единственное, что есть в доках: https://docs.vmware.com/en/VMware-vSphere/7.0/vsan-network-design-guide/GUID-6E3EEA25-E77D-4E6B-BDC8-488672FFC41B.html
Ну и блог с картинками: https://core.vmware.com/blog/vsan-7-update-2-rdma-support
Вот единственное, что есть в доках: https://docs.vmware.com/en/VMware-vSphere/7.0/vsan-network-design-guide/GUID-6E3EEA25-E77D-4E6B-BDC8-488672FFC41B.html
Ну и блог с картинками: https://core.vmware.com/blog/vsan-7-update-2-rdma-support
N
вот у нас была обычная сеть на 25GbE mellanox. Стандартные SN2010+CX4, которые часто берут под backend сеть для HCI (даже без огляжки на RDMA) Потом вышла 7.0U2 и вжух! мы получили до +25% на 4K и снижение latency. По моему. совсем не плохо.
N
Тем более, ЕМНИП, найти более-менее нормальный и актуальный свитч без поддержки RoCE v2 уже давно достаточно сложно. А карты - первыми и так добавили самые популярные 25GbE, думаю, что другие тоже захотят сертифицироваться.
N
@alekura , у тебя нет актульной доки как включить RDMA для vSAN на Mellanox?