Телеграмм чат группы saltstack страница 820

проблема-то в чем? 🙂

20:11пожаловаться #1

Aleksey Danilin

всем привет, я не самый сильный технический спец - PM, прошу помощи/советов, нужно сдвинуть спор в команде с мертвой точки.

описание:
есть большой CDN 150+ узлов.
кастомер настраивает услугу в ЛК, после чего требуется создать и разнести Nginx (не только, но проблема именно тут) конфиги по этим узлам. Используется saltstack. КОгда возникает большая нагрузка, одновременно меняет настройки много клиентов, то миньоны солта не успевают решать задачи и захлебываются. создание конфига и разнесение может занимать до 20 минут.

это общее описание.., если кто-то хочет помочь ) имеет такое желание.. я бы в ЛС скинул подробности

У вас настройки как применяются

20:12пожаловаться #2

Может перейти на пулл модель ?

20:12пожаловаться #3

Мы в хостинге так и делали. Вместо того, чтобы триггерить изменение на каждое изменение (извините за тавтологию) - сделали поллинг конфы и и применение изменений, скажем, каждые пять минут

20:12пожаловаться #4

Иначе там как-то дофига копий энжинкса образовывалось

20:13пожаловаться #5

А вообще такая задача решается консул + envoy

20:13пожаловаться #6

Aleksey Danilin in Saltstack

этот ?

https://learn.hashicorp.com/consul/integrations/nginx-consul-template?fbclid=IwAR3trBMbvxKnyZVCefm8yW2ovd_bPc16tE5ETFBy4b8F8u_TFAOoFPhsfMk

20:13пожаловаться #7

Aleksey Danilin in Saltstack

HashiCorp Learn

Load Balancing with NGINX and Consul Template | Consul - HashiCorp Learn

In this guide, you will use Consul template to update NGINX load balancer
configurations based on changes in Consul service discovery.

20:13пожаловаться #8

George Gaál

А вообще такая задача решается консул + envoy

✝️

20:13пожаловаться #9

Я искренне все еще не понял problem domain

20:14пожаловаться #10

что такое "захлебываются"?

20:14пожаловаться #11

Как изменения пушатся? highstate? scheduller? orchestration? beacon?

20:14пожаловаться #12

Aleksey Danilin in Saltstack

описание в таске у нас такое:

В данный момент процесс разнесения конфигурации по узлам cdn выглядит следующим образом:
1. Входящий запрос от клиента к api
2. Сохранение конфигурации в БД
3. Отправка сигнала к salt на обновление конфигурации на узлах

п.3 включает в себя обновление конфигурации на всех узлах для всех клиентов.
Если приходит несколько запросов от клиента одновременно, все, кроме первого становятся в очередь и ждут выполнения.
Очередь иногда может "распухать", при этом salt расходует в разы больше памяти и проседает в производительности, что ведет в деградации сервиса и замедлению распространения конфигурации

20:15пожаловаться #13

>Отправка сигнала к salt на обновление конфигурации на узлах
через что? Соль это может делать очень по разному

20:15пожаловаться #14

какой раннер\state вызывается?

20:16пожаловаться #15