Size: a a a

2021 April 26

T

Timo in ru_jenkins
плагин прометеуса не стоит юлать - он только для небольших инстансов годится ибо выгружает слишком много метрик ненужных.
мы юзали обычный  metrics плагин + jmx-exporter , он позволяет замониторить и джава машину, и метрики по кол-ву билдов, проектов, агентов, и хелсчеков
источник

AK

Alex K in ru_jenkins
Не скажу про внешние плагины, но у себя проблем не заметили + при желании можно ограничить скоуп данных, т.к. мы сами управляем выводом
источник

AK

Alex K in ru_jenkins
Там под капотом тот же metrics плагин, только завернутый для прометея
источник

GD

G D in ru_jenkins
в итоге хочется видеть где именно подвисает
источник

AK

Alex K in ru_jenkins
ну это по-другому решать надо кмк - когда подвиснет, собрать треддамп и читать его, Мониторинг он максимум скажет что память тю-тю или CPU забился
источник

AK

Alex K in ru_jenkins
а мастер наглухо виснет? UI не открывается?
источник

GD

G D in ru_jenkins
не наглухо, открывается, но медленно очень
чекаут репо на слейвах берет больше 5 минут вместо секунд
источник

GD

G D in ru_jenkins
и все работает медлено
источник

GD

G D in ru_jenkins
источник

GD

G D in ru_jenkins
вроде позволяет видеть где затыкается
источник

AK

Alex K in ru_jenkins
я не юзал, тут не подскажу. А можно примерное число параллельно работающих джоб и сколько слейвов?
источник

GD

G D in ru_jenkins
больше 100 слейвов
джобов несколько сотен
и очередь не меньше 200
источник

GD

G D in ru_jenkins
😞
источник

GD

G D in ru_jenkins
мастер на 96 CPU  и 512 GB RAM
источник

AK

Alex K in ru_jenkins
это не очень много на самом деле для Jenkins-а. а слейвы - 1 слейв = 1 слот для задачи?
источник

GD

G D in ru_jenkins
в основном да
источник

AK

Alex K in ru_jenkins
а нельзя уменьшить число слейвов и увеличить число слотов?
источник

AK

Alex K in ru_jenkins
вообще, я бы начал с анализа потребления памяти. Растет ли OldGen, как часто стартует GC
источник

GD

G D in ru_jenkins
работаем над этим, но пока никак
источник

AK

Alex K in ru_jenkins
А он тупить сразу начинает или спустя время после рестарта? Что-то предшествует тупняку? Есть ли сампоисные плагины?
источник