MM
bare metal
Size: a a a
2020 July 11
SM
а почему именно куб? а не номад например, который на раз умеет в федерацию?
MM
а почему именно куб? а не номад например, который на раз умеет в федерацию?
был уже опыт с кубом
MM
да в принципе проблем не испытываем от отсутствия federation
MM
только вот мониторинг бы настроить)
SM
да в принципе проблем не испытываем от отсутствия federation
ну такое, как у вас деплой происходит какого нибудь сервиса? или гитопс юзаете?
k
только вот мониторинг бы настроить)
Собирай метрики в одну общую VM, смотри из неё графаной
II
только вот мониторинг бы настроить)
Вот такое на глаза попадалось: https://medium.com/faun/kubernetes-multi-cluster-monitoring-using-prometheus-and-thanos-7549a9b0d0ae
GG
thanos фуфуфу )
MM
ну такое, как у вас деплой происходит какого нибудь сервиса? или гитопс юзаете?
из гитлаба деплоим
GG
как будто сырое решение
GG
мне больше vm нравится
SM
из гитлаба деплоим
ну в кратце можно процесс, есть вот у вас 26 кластеров, вам нужно на 26 катануть обновленный сервис, цмклом идите по каждому? или какой процесс?
MM
ну в кратце можно процесс, есть вот у вас 26 кластеров, вам нужно на 26 катануть обновленный сервис, цмклом идите по каждому? или какой процесс?
ну, у нас есть около 6 daemonset'ов, которые представляют из себя различные системные сервисы (сбор логов в grafana loki + google cloud pub/sub через fluentd, + разные другие штуки, которые нужны чтобы наши игровые сервера работали), мы их деплоим через gitlab CI
А сами workloads деплоятся из нашего кода, когда игровому сервису потребуется поднять новый деплоймент (со своей конфигурацией)
А сами workloads деплоятся из нашего кода, когда игровому сервису потребуется поднять новый деплоймент (со своей конфигурацией)
MM
Если очень кратко: наш алгоритм матчмейкинга подбирает игроков по пингу из их же региона и создает для них игровой сервер в ближайшем к ним кластере, они играют 30-40 минут, дальше деплоймент удаляется
SM
Если очень кратко: наш алгоритм матчмейкинга подбирает игроков по пингу из их же региона и создает для них игровой сервер в ближайшем к ним кластере, они играют 30-40 минут, дальше деплоймент удаляется
с этим пнятно, я говорю про "инфраструктурные " сервисы, тот же локи например на 26 кластеров
MM
с этим пнятно, я говорю про "инфраструктурные " сервисы, тот же локи например на 26 кластеров
просто в гитлабе добавляем через вкладку "Kubernetes Clusters" все 26 кластеров в группу, далее они доступны во всех подпроектах этой группы. И в каждом подпроекте в .gitlab-ci.yaml указываем все эти 26 кластеров как отдельные environments
MM
и да, параллельно катится
MM
единственное что неудобно, когда новый кластер добавляем нужно все .gitlab-ci.yaml поправить во всех репозиториях
i
Можно свой деплойный оператор сделать