MS
@vrutkovs хотел решить проблемму с потерей пакетов отключением ipv6 на ноде. И ... тем самым её убил :D
sysctl -w net.ipv6.conf.default.disable_ipv6=1это убило мастер ноду.
Size: a a a
2020 March 17
MS
MS
ну естественно, хорошо что недогадался это сразу в sysctl.conf ... приходятж мне идеи иногда ... странные
VR
Michael Silich
@vrutkovs хотел решить проблемму с потерей пакетов отключением ipv6 на ноде. И ... тем самым её убил :D
странно. Так кластер не настроен на ipv6, чем это поможет?
В любом случае это баг tuned оператора - он должен был тебя по рукам шлёпнуть и выключить его обратно
В любом случае это баг tuned оператора - он должен был тебя по рукам шлёпнуть и выключить его обратно
VR
попробуй восстановить её ручками -
oc debug/node на живой и ssh на мастерVR
если не поможет то милости просим к https://docs.okd.io/latest/backup_and_restore/disaster_recovery/scenario-1-infra-recovery.html
MS
https://bugzilla.redhat.com/show_bug.cgi?id=1809281 вот тут багу для ipv6 нашёл и чтото мне вздумалось ipv6 отключить
VR
sh-4.2# ping spark-worker-0
ping: spark-worker-0: Name or service not known
ping: spark-worker-0: Name or service not known
пинг не работает в контейнерах без привелегий
MS
100 бед 1 ответ, хард ребут как обычно не оплошал.
U
хм.. засада. аппликуха пытается по доменному имени достучаться, но она не понимает что это и где это.
VR
хм.. засада. аппликуха пытается по доменному имени достучаться, но она не понимает что это и где это.
AA
Michael Silich
ну естественно, хорошо что недогадался это сразу в sysctl.conf ... приходятж мне идеи иногда ... странные
оно и не будет через sysctl работать, пока через nmcli не погасишь инициализацию ipv6 (проверено на centos 8)
MS
хм.. засада. аппликуха пытается по доменному имени достучаться, но она не понимает что это и где это.
постучи по сервису, своей апликухой.
VR
Michael Silich
https://bugzilla.redhat.com/show_bug.cgi?id=1809281 вот тут багу для ipv6 нашёл и чтото мне вздумалось ipv6 отключить
о, интересно, видимо и правда бага OVN
MS
оно и не будет через sysctl работать, пока через nmcli не погасишь инициализацию ipv6 (проверено на centos 8)
ок, спс не знал. До centos8 никак руки недоходят.
U
не умеет аппликуха. она берет хост из строки инициализации задания, в этом то и беда. если в хост костыль вбить в виде айпишника внутреннего - аппликуха начинает с воркерами работать нормально, и пинг сразу начинает бегать без манипуляций с привилегиями
VR
о, интересно, видимо и правда бага OVN
рекомендую кстати отписать что случилось сие и в опенстаке на 4.4 с OVN - думаю будет повыше приоритет
VR
не умеет аппликуха. она берет хост из строки инициализации задания, в этом то и беда. если в хост костыль вбить в виде айпишника внутреннего - аппликуха начинает с воркерами работать нормально, и пинг сразу начинает бегать без манипуляций с привилегиями
что прям, ICMP?
VR
https://operatorhub.io/operator/radanalytics-spark и https://operatorhub.io/operator/spark-gcp как-то и без него обходятся видимо