VR
Приветствую!
Вопрос в том, как удалить NS в статусе terminating?
Вопрос в том, как удалить NS в статусе terminating?
Size: a a a
2020 June 16
SF
AK
Приветствую!
Вопрос в том, как удалить NS в статусе terminating?
Вопрос в том, как удалить NS в статусе terminating?
kubectl get apiserviceЕсть что упавшее тут?
SF
kubectl get apiserviceЕсть что упавшее тут?
вот список https://pastebin.com/B0xV0uuT
SF
kubectl get apiserviceЕсть что упавшее тут?
если правильно понимаю, то все на месте
SF
никто не упал
SF
есть в kube-service-catalog упавшие controller-manager-k9njn и apiserver-b6pfx
AK
Ой, это OpenShift. Тут какой-то странный вывод.
kubectl get apiservice -o wide, может? Статус в pastebin не видно.AK
Если все aggregated apiservers работают, то, может, какой-то объект залип в NS? Тогда можно получить список всех-всех объектов в NS вот так:
./скрипт.sh имя_зависшего_namespace
##############################################!/bin/bash
mapfile -t api_versions < <(kubectl get --raw /apis | jq -r '.groups[].preferredVersion.groupVersion | "/apis/\(.)"')
api_versions+=("/api/v1")
for path in "${api_versions[@]}"; do
echo -e "\n\e[32mAPI: $path\e[0m\n"
mapfile -t namespaced_resources < <(kubectl get --raw "$path" | jq -r '.resources[] | select(.namespaced) | .name | select(contains("/") | not)')
for namespaced_resource in "${namespaced_resources[@]}"; do
echo -e "\n\e[31mResource \"$namespaced_resource\"\e[0m\n"
kubectl get -n "$1" "$namespaced_resource" 2>&1
done
done
SF
Если все aggregated apiservers работают, то, может, какой-то объект залип в NS? Тогда можно получить список всех-всех объектов в NS вот так:
./скрипт.sh имя_зависшего_namespace
##############################################!/bin/bash
mapfile -t api_versions < <(kubectl get --raw /apis | jq -r '.groups[].preferredVersion.groupVersion | "/apis/\(.)"')
api_versions+=("/api/v1")
for path in "${api_versions[@]}"; do
echo -e "\n\e[32mAPI: $path\e[0m\n"
mapfile -t namespaced_resources < <(kubectl get --raw "$path" | jq -r '.resources[] | select(.namespaced) | .name | select(contains("/") | not)')
for namespaced_resource in "${namespaced_resources[@]}"; do
echo -e "\n\e[31mResource \"$namespaced_resource\"\e[0m\n"
kubectl get -n "$1" "$namespaced_resource" 2>&1
done
done
спасибо, попробую
АК
M
Привет всем, у кого удалось nginx-lua-prometheus вкруить в nginx ingress?
SF
Если все aggregated apiservers работают, то, может, какой-то объект залип в NS? Тогда можно получить список всех-всех объектов в NS вот так:
./скрипт.sh имя_зависшего_namespace
##############################################!/bin/bash
mapfile -t api_versions < <(kubectl get --raw /apis | jq -r '.groups[].preferredVersion.groupVersion | "/apis/\(.)"')
api_versions+=("/api/v1")
for path in "${api_versions[@]}"; do
echo -e "\n\e[32mAPI: $path\e[0m\n"
mapfile -t namespaced_resources < <(kubectl get --raw "$path" | jq -r '.resources[] | select(.namespaced) | .name | select(contains("/") | not)')
for namespaced_resource in "${namespaced_resources[@]}"; do
echo -e "\n\e[31mResource \"$namespaced_resource\"\e[0m\n"
kubectl get -n "$1" "$namespaced_resource" 2>&1
done
done
https://pastebin.com/2fkNiERN
вот вывод, я так понимаю, что все пусто, ничего нет в NS
вот вывод, я так понимаю, что все пусто, ничего нет в NS
SF
Ой, это OpenShift. Тут какой-то странный вывод.
kubectl get apiservice -o wide, может? Статус в pastebin не видно.так тоже не показывает
AK
так тоже не показывает
API: /apis/admission.certmanager.k8s.io/v1beta1Упал webhook Pod в cert-manager где-то. Надо его поднять или удалить (временно) apiservice.
Error from server (ServiceUnavailable): the server is currently unable to handle the request
AK
kubectl get apiservice v1beta1.admission.certmanager.k8s.io -o yaml --export > apiservice-backup.yaml
kubectl delete apiservice v1beta1.admission.certmanager.k8s.io
Вот так, если не удаётся поднять Pod с cert-manager webhook. И должен NS удалиться сразу.
SF
kubectl get apiservice v1beta1.admission.certmanager.k8s.io -o yaml --export > apiservice-backup.yaml
kubectl delete apiservice v1beta1.admission.certmanager.k8s.io
Вот так, если не удаётся поднять Pod с cert-manager webhook. И должен NS удалиться сразу.
сделано, но ns жив и Terminating
AK
Exponential backoff уже большой, надо подождать пару минут.
SF
Exponential backoff уже большой, надо подождать пару минут.
О чудо!!!!!
Спасибо тебе огромное!
Все случилось!
Спасибо тебе огромное!
Все случилось!