Size: a a a

2020 May 22

SO

Sasha Odarchuk in Sysadminka
Application: w3wp.exe
Framework Version: v4.0.30319
Description: The process was terminated due to an unhandled exception.
Exception Info: System.AccessViolationException
источник

SO

Sasha Odarchuk in Sysadminka
Вин2016
антивируса нет
самописное ПО
источник

S

Slach in Sysadminka
Вадим Исаканов
Не про эту проблему
А у тебя на нодах ресурсов вообще достаточно?
Чот както часто у тебя такое
нода у меня одна
на ней 4 гига памяти
нагрузки на ноде нет

голый minikube


гыгы, сделал minikube stop
гляжу в
docker ps
а там куча контейнеров от кубера еще осталась запущеной (а НЕ ДОЛЖНА)

делаю
docker stop $(docker ps -a -q)

и нихуя, контейнеры не гаснут =)
источник

AU

Alex U in Sysadminka
Sasha Odarchuk
Вин2016
антивируса нет
самописное ПО
скорее всего, самописное ПО  ломает сервер.
источник

SO

Sasha Odarchuk in Sysadminka
Alex U
скорее всего, самописное ПО  ломает сервер.
я тоже так думаю
но нужно знать что именно не так ((
источник

ВИ

Вадим Исаканов... in Sysadminka
minikube * microk8s с 4 гб памяти у меня тоже периодически так дохли
источник

AU

Alex U in Sysadminka
Sasha Odarchuk
я тоже так думаю
но нужно знать что именно не так ((
обращайтесь к самописцам, пусть дебагят ;)
источник

AU

Alex U in Sysadminka
слэша, если контейнеры не гаснут - сдох твой бобик (докер демон).
источник

S

Slach in Sysadminka
Вадим Исаканов
minikube * microk8s с 4 гб памяти у меня тоже периодически так дохли
я уверен что minikube тут непричем
возможно убивает все clickhouse-operator как таковой
источник

ВИ

Вадим Исаканов... in Sysadminka
Вадим Исаканов
minikube * microk8s с 4 гб памяти у меня тоже периодически так дохли
Там не совсем в кубе дело, у microk8s я в последний раз смотрел, какойто процесс был кривой (специфичный для микрок8с бинарь емнип) и начинал адски жрать цпу. Можно глянуть в момент перегруза, что там происходит
И все дохло)
Помогало ребутнуть его или просто изначально дать больше ресурсов
источник

ВИ

Вадим Исаканов... in Sysadminka
Slach
нода у меня одна
на ней 4 гига памяти
нагрузки на ноде нет

голый minikube


гыгы, сделал minikube stop
гляжу в
docker ps
а там куча контейнеров от кубера еще осталась запущеной (а НЕ ДОЛЖНА)

делаю
docker stop $(docker ps -a -q)

и нихуя, контейнеры не гаснут =)
У тебя linux? Какая версия докера и ядро?
источник

L

Lev in Sysadminka
Slach
Переслано от
в очередной раз умер кубер
при старте kube-controller-manager
в describe вижу вот такую фигню

  Normal   Created    25s (x2 over 43s)    kubelet, local-altinity-clickhouse-operator  Created container kube-controller-manager    Warning  Failed     25s (x2 over 43s)    kubelet, local-altinity-clickhouse-operator  Error: failed to start container "kube-controller-manager": Error respons  e from daemon: OCI runtime create failed: container_linux.go:341: creating new parent process caused "container_linux.go:1923: running lstat on namespace path \"  /proc/12244/ns/ipc\" caused \"lstat /proc/12244/ns/ipc: no such file or directory


docker живой
все показывает как надо

etcd запущен

правда я попытался к нему законектиться и получил какую то фигню
docker exec -it b6ccf03cc286 etcdctl alarm list
{"level":"warn","ts":"2020-05-22T12:14:00.423Z","caller":"clientv3/retry_interceptor.go:61","msg":"retrying of unary invoker failed","target":"endpoint://client-3f94a64d-d7aa-4e43-ae96-6cf9f9894d16/127.0.0.1:2379","attempt":0,"error":"rpc error: code = DeadlineExceeded desc = latest connection error: connection closed"}
Error: context deadline exceeded

при этом сокет он слушает
docker exec -it b6ccf03cc286 ss -nltp | grep 2379
LISTEN     0      128    127.0.0.1:2379                     *:*                   users:(("etcd",pid=1,fd=6))
LISTEN     0      128    10.0.2.15:2379                     *:*                   users:(("etcd",pid=1,fd=5))


в какую сторону копать?
источник

ВИ

Вадим Исаканов... in Sysadminka
Миникуб мб и не причем, но у тебя многое отличается от того куба, который люди в постоянном режиме в проде крутят
вкусы ваши несколько специфичны, баги тоже)))))
источник

i

inqfen in Sysadminka
Slach
нода у меня одна
на ней 4 гига памяти
нагрузки на ноде нет

голый minikube


гыгы, сделал minikube stop
гляжу в
docker ps
а там куча контейнеров от кубера еще осталась запущеной (а НЕ ДОЛЖНА)

делаю
docker stop $(docker ps -a -q)

и нихуя, контейнеры не гаснут =)
При недостатках ресурсов встречал залипание cgroups
источник

i

inqfen in Sysadminka
поэтому контейнеры не работают, но не гаснут
источник

i

inqfen in Sysadminka
Лечится ребутом
источник

S

Slach in Sysadminka
Вадим Исаканов
У тебя linux? Какая версия докера и ядро?
ubuntu 18.04
источник

S

Slach in Sysadminka
Preparing Kubernetes v1.17.3 on Docker 19.03.9 ..
источник

S

Slach in Sysadminka
inqfen
При недостатках ресурсов встречал залипание cgroups
полечилось через
systemctl stop docker
systemctl stop containerd
killall containerd-shim
systemctl start containerd
systemctl start docker
источник

S

Slach in Sysadminka
inqfen
При недостатках ресурсов встречал залипание cgroups
недостатка памяти имеется ввиду?

бля, ребята, 4 гигабайта на ПУСТОЙ кластер? это не дохрена?
источник