Size: a a a

2021 June 27

N

Nikolay Kulikov in VMware vSAN
Получится. Только на одном у вас будет жить vsan, на втором vMotion, на третьем vm. Что обычно вполне себе норм. Особенно для 25gbe
источник

AR

A. Riedel in VMware vSAN
Не совсем понятно, это разве не  обычное применение:
карты разделяются под задачи по vmk's, или и VM трафик и vMotion тоже научился ходить по RDMA ?

Eсть 6 Карт 10 G, 2 для VM трафика, 4 для storage выделены, тогда не получиться vSan гонять по 4 линкам?
источник

N

Nikolay Kulikov in VMware vSAN
А зачем вам гонять vsan по 4-м линкам? У вас vsan 40gbe выбирает?
источник

AR

A. Riedel in VMware vSAN
Хотя бы по двум, 10 G будет мало.
Ну на RDMA свет клином не сошёлся, просто увидел что и сеть и карты подходят, почему бе нет.

Я надеюсь TCP vSan не настолько медленно и затратно по CPU как пишут в маркетинговых публикациях по RDMA  и vSan

А в классическом TCP vSan 2 Линка получиться использовать активно параллельно?
источник

N

Nikolay Kulikov in VMware vSAN
А вы утыкаетесь в 10gbe в реальной жизни? Просто вот интересно.
источник

N

Nikolay Kulikov in VMware vSAN
Tcp - не медленный. Разница 0-25% процентов в зависимости от профиля. На 4k 100% read - 25%, 5-10% на 16-64к.
источник

N

Nikolay Kulikov in VMware vSAN
И да, вы можете без rdma собирать lacp. Вопрос только в том, нужно ли вам это
источник

AR

A. Riedel in VMware vSAN
А разве 10g это так много? Тем более если хостов 6 планируется.

Зачем делать как обычно если есть ресурсы сразу сделать лучше и и запасом на будущее.
источник

N

Nikolay Kulikov in VMware vSAN
Количество хостов - совершенно не важно. Хоть 100. Тогда у вас будет 1TB/s на 100 хостов и 60Gb/s на 6 хостов.
источник

AR

A. Riedel in VMware vSAN
lacp это тогда 2 Линка в один Switch, для HA два два в другой, вот и 4 nic
источник

N

Nikolay Kulikov in VMware vSAN
Как минимум много это или нет зависит от конфигурации железа и планируемой нагрузки. И в общем да, я достаточно редко видел утилизированную десятку в проде, если не под бекапами
источник

MD

Mista D in VMware vSAN
2х25 хватит всем (с) Николя Кейтс
источник

N

Nikolay Kulikov in VMware vSAN
Не всем. Но многим. ;)
источник

AR

A. Riedel in VMware vSAN
Хорошо попробуем, подумаем,
в vSan не делают mpio как например с iSCSI с помощью разных vmk's?
источник

N

Nikolay Kulikov in VMware vSAN
источник

N

Nikolay Kulikov in VMware vSAN
Ну да ладно. В итоге, т.к. rdma вы все равно пока включить не можете (что и страшно в общем-то), то собирать lag вы вполне можете. Будет в этом смысл или нет - зависит от. Хуже не будет (по крайне мере, если вы умеете с ним работать и не первый раз включаете).
источник

AR

A. Riedel in VMware vSAN
Из этой доки по поводу RDMA, похоже RDMA еще не поспело 🤔

All hosts in the cluster must support RDMA. If any host loses RDMA support, the entire vSAN cluster switches to TCP.

vSAN with RDMA supports NIC failover, but does not support LACP or IP-hash-based NIC teaming.
источник
2021 June 28

N

Nikolay Kulikov in VMware vSAN
Ну, первое как бы ожидаемо - либо кластер работает, по tcp, либо по roce. Смешанный режим не поддерживается и это абсолютно нормально и понятно. И да, lacp и io-hash не работает с rdma, т.к. Запросы пролетают мимо стека esxi - на то он и rdma.
источник

AR

A. Riedel in VMware vSAN
В vSAN Cache Tier обязательный? Даже если собираешь из SSD?
источник

EZ

Eugene Zaytsev in VMware vSAN
Да
источник