prometheus/prometheus tagged: 2.32.0-rc.1 / 2021-12-07
Link: https://github.com/prometheus/prometheus/releases/tag/v2.32.0-rc.1
Release notes:

*   [ENHANCEMENT] Web: Improve message wording on /agent page. [#9943](https://github.com/prometheus/prometheus/pull/9943)
*   [BUGFIX] Web: Don't try to fetch and display Alertmanager stats on /status page in Agent mode. [#9941](https://github.com/p...

More

Да я ещё и до redisa,  не достучался, по крайне мере логи пустые. Счас хочу ламду с node.j поднять и посмотреть, принимает каш хоть что то... Он ведь поступ через auth token  имеет только
Вообще накуралесил походу...
Вроде нашел статью, что надо привязать SA на кластере и роль на redis iam

Думал у кто то делал уже...

GoogleContainerTools/skaffold description changed: v1.35.1
Link: https://github.com/GoogleContainerTools/skaffold/releases/tag/v1.35.1
Release notes:

v1.35.1 Release

helm/helm tagged: v3.7.2
Link: https://github.com/helm/helm/releases/tag/v3.7.2
Release notes:

Helm release v3.7.2

containers/libpod tagged: v3.4.4
Link: https://github.com/containers/podman/releases/tag/v3.4.4
Release notes:

v3.4.4

containers/libpod description changed: v3.4.4
Link: https://github.com/containers/podman/releases/tag/v3.4.4
Release notes:

### Bugfixes

*   Fixed a bug where the `podman exec` command would, under some circumstances, print a warning message about failing to move `conmon` to the appropriate cgroup ([#12535](https://github.com/containers/podman/issues/12535)).
*   Fixed a...

More

containers/libpod description changed: v3.4.4
Link: https://github.com/containers/podman/releases/tag/v3.4.4
Release notes:

### Bugfixes

*   Fixed a bug where the `podman exec` command would, under some circumstances, print a warning message about failing to move `conmon` to the appropriate cgroup ([#12535](https://github.com/containers/podman/issues/12535)).
*   Fixed a...

More

projectcalico/calico description changed: v3.21.2
Link: https://github.com/projectcalico/calico/releases/tag/v3.21.2
Release notes:

Release notes can be found at [https://docs.projectcalico.org/archive/v3.21/release-notes/](https://docs.projectcalico.org/archive/v3.21/release-notes/)

Attached to this release are the following artifacts:

*   `release-v3.21.2.tgz`: docker images ...

More

GoogleContainerTools/skaffold description changed: v1.35.1
Link: https://github.com/GoogleContainerTools/skaffold/releases/tag/v1.35.1
Release notes:

v1.35.1 Release

GoogleContainerTools/skaffold tagged: v1.35.1 Release
Link: https://github.com/GoogleContainerTools/skaffold/releases/tag/v1.35.1
Release notes:

# v1.35.1 Release - 11/18/2021

**Linux amd64**  

`curl -Lo skaffold https://storage.googleapis.com/skaffold/releases/v1.35.1/skaffold-linux-amd64 && chmod +x skaffold && sudo mv skaffold /usr/local/bin`

**Linux arm64**  

`curl -Lo...

More

Слышал хорошие отзывы о силиум.
А у нас старый добрый kube-proxy в iptables mode.

Интересовался потому, что недавно к нам пришло много трафика и помер целый кластер : )
Теперь придумываем всякие лимиты на лоад балансере. А понимания почему помер кластер до сих пор нет. Виним kube-proxy т.к. во время трафик-шторма выключение kube-proxy оживляло ноду, а включение делало её овощем - ksoftirq съедали весь цпу, пинги к ноде терялись, ОС не могла справиться. Мб и не в kube-proxy дело, а просто ОС была перегружена таким наплывом трафика.

Такой вопрос про мониторинг есть.

Какую метрику лучше мониторить, чтобы понимать и вовремя алёртить когда потребление памяти подходит к, скажем, 70% относительно лимита?

- container_memory_working_set_bytes
- container_memory_rss
- что-то другое ?

Простите что не под делу, но как вы собрались реагировать на этот алерт ?

Можно таск на утечку завести

Либо лимиты поднять, в зависимости от ситуации

Ага, ок. Я чот перечитал про slo

можно рестартить под нежно со всеми грейс периодами и ужином перед казнью, вместо оом килла из-за угла

Примерно вот так можно сделать

100*max(label_move(max(avg_over_time(container_memory_working_set_bytes{namespace!~"your_namespace"}[2h]))by(container,k8s_cluster,namespace,pod)/max(kube_pod_container_resource_limits_memory_bytes{namespace!~"your_namespace"})by(container,k8s_cluster,namespace,pod),"container","service"))by(k8s_cluster,namespace,service,pod)>60

Ручками? Звучит грустно