Size: a a a

KVM (PVE/oVirt etc)

2020 June 10

n

nanomechanic in KVM (PVE/oVirt etc)
на ConnectX-3 с той фирмварью, которая доступна для моих HBA не работает разрешение VLAN для VF списочком, работает только принудительное тегирование через ip link set dev <dev> vf X vlan Y
источник

k

kvaps in KVM (PVE/oVirt etc)
nanomechanic
nvme вкомпилен в ядро, mellanox OFED собратеся в DKMS с учлучшайзингом на тему nvmeof, и в стоком модуле нет нужных символов, а он вкомпилен в ядро
А где взять указанный патч для nvme?
источник

n

nanomechanic in KVM (PVE/oVirt etc)
надо просто ядро из гита собрать, там это включается опцией в .config, надо просто удолить из мейкфайла
источник

k

kvaps in KVM (PVE/oVirt etc)
nanomechanic
на ConnectX-3 с той фирмварью, которая доступна для моих HBA не работает разрешение VLAN для VF списочком, работает только принудительное тегирование через ip link set dev <dev> vf X vlan Y
тожк игрался с vf на connectx-3, там ещё нет возможности несколько mac-адресов слушать, то есть бридж на vf уже не повесишь
источник

k

kvaps in KVM (PVE/oVirt etc)
бондинг кстати работал более менее норм поверх vf
источник

k

kvaps in KVM (PVE/oVirt etc)
nanomechanic
надо просто ядро из гита собрать, там это включается опцией в .config, надо просто удолить из мейкфайла
какая опция?
источник

k

kvaps in KVM (PVE/oVirt etc)
где об этом прочитать вообще?
источник

k

kvaps in KVM (PVE/oVirt etc)
Mellanox об этом пишет или кто?
источник

n

nanomechanic in KVM (PVE/oVirt etc)
типа NVME [*] =)
источник

k

kvaps in KVM (PVE/oVirt etc)
kvaps
тожк игрался с vf на connectx-3, там ещё нет возможности несколько mac-адресов слушать, то есть бридж на vf уже не повесишь
Ещё недавно у нас была fancy-схема с двумя бондами в active-backup режиме поверх VF, на каждом блейде :)

https://telegra.ph/file/d3f07dfc71a8753d7b7ad.png
источник

n

nanomechanic in KVM (PVE/oVirt etc)
802.3ad бондиг в VF работает (если lacp на хосте уже насроен) или только active-backup ?
источник

n

nanomechanic in KVM (PVE/oVirt etc)
просто когда с 802.3ad я включаю на хосте vf X snoopchk off то хост от сети отпадает
источник

k

kvaps in KVM (PVE/oVirt etc)
вернее даже так:
источник

k

kvaps in KVM (PVE/oVirt etc)
источник

k

kvaps in KVM (PVE/oVirt etc)
nanomechanic
802.3ad бондиг в VF работает (если lacp на хосте уже насроен) или только active-backup ?
не уверен, у нас тогда TRILL был и мы юзали active-backup
источник

k

kvaps in KVM (PVE/oVirt etc)
и то работало это так себе
источник

k

kvaps in KVM (PVE/oVirt etc)
nanomechanic
просто когда с 802.3ad я включаю на хосте vf X snoopchk off то хост от сети отпадает
там ещё такой момент есть что VF'ки должны быть собраны из разных слотов, например ты загружаешь:
modprobe mlx4_core port_type_array=2,2 num_vfs=1,1,0 probe_vf=1,1,0
потом юзаешь интерфейсы 1 и 3, т.к. 1 и 2 находятся в одном слоте
источник

n

nanomechanic in KVM (PVE/oVirt etc)
не, у меня на интеловской встройке не робит
источник

k

kvaps in KVM (PVE/oVirt etc)
Хочу ConnectX-4 попробовать, емнип там VF'ки конфигурятся прямо из sysctl
источник

n

nanomechanic in KVM (PVE/oVirt etc)
active-backup я думаю заработает, но мне не комфортно потому как помимо http запросов там syslog трафик на лог коллектор гонится, с амплификацией
источник