ага, ну вот, теперь даже алертов нет

UPD: пошли алерты, думаю сейчас операторы восстановятся

вот это надо зарепортить, думаю в журнале что-то осталось

яб не сказал что алертов нет :)

теперь master-2 etcd плохо себя чуствует

подозреваю что это machine-config включился. Следующий слепок от Insights будет где-то через час - посмотрим подробнее

что за Insights?

оператор, который делает снапшоты конфигурации критичных операторов и шлет нам - можно поглядеть детали что именно упало

ага, ясненько. У вас там прям борда есть с зелеными, желтыми и красными кластерами?

не совсем, но примерно так, да.
Телеметрия пересылается в наш Танос, откуда графаной можно следить за конкретным кластером и делать агрегацию данных

и кроме того оно же агрегируется через какие-то магические тулзы - и в jupyterhub можно делать репорты и графики

удобно

графана

nice

ERROR Error: Error waiting for instance to create: Quota 'SSD_TOTAL_GB' exceeded.  Limit: 250.0 in region europe-north1.

Кстати, есть элегантный способ обойти

openshift-install create manifests
# исправить размер диска /параметры в machineset для мастеров/воркеров
openshift-install create cluster

хмм, до 20?)

Да, если один мастер деплоишь то надо 32 хотя бы

Мой болеющий после апдейта кластер после пару ребутов больше еа жалуеться на недоступность etcd ...но в логах ectd всё еще прут errors такого вида

service/host-etcd-2 is missing annotation alpha.installer.openshift.io/etcd-bootstrap

и такое

(combined from similar events): Status for clusteroperator/etcd changed: Degraded message changed from "NodeControllerDegraded: All master nodes are ready\nEtcdMembersDegraded: No unhealthy members found" to "NodeControllerDegraded: All master nodes are ready\nEtcdMembersDegraded: okd4-khbpx-master-0 members are unhealthy, members are unknown"