VS
Есть 100500 каких-то невнятных алертов
Size: a a a
2020 March 17
VS
эммм? Это как?
AS
вот эти 100500 они внятные и по делу
A
в kube-prometheus есть некоторое количество алертов, но они не про поды
AS
а про то что какой то под cpu жрет... ну ок его полимитит. если сильно будет лимитить про это есть алерт
AS
если памяти много сожрет его куб убъет. про это есть алерт
AS
на ноду нельзя зашедулить ресурсов больше чем есть
AS
так что глобально с нодой такой беды быть не может
VS
Ясно)
Спасибо. Думал, что может не увидел. Пойду искать готовое. Может уже кто-то написал
Спасибо. Думал, что может не увидел. Пойду искать готовое. Может уже кто-то написал
AS
я ничо не понял но удачи :)
A
Гайз, а подскажите пожалуйста:
В базовом сетапе прометеус-оператора нет алертов для High CPU или Memory Usage ???
В базовом сетапе прометеус-оператора нет алертов для High CPU или Memory Usage ???
мне кажется что в первом случае у тебя должна быть нотификация о троттлинге, а во втором - об ООМ
если нет ООМ, значит память утилизируется нормально и нет смыcла алертить
если нет ООМ, значит память утилизируется нормально и нет смыcла алертить
A
троттлинг во многих случаях приемлим
VS
троттлинг во многих случаях приемлим
правильно. Я вот тоже люблю мониторинг по косвенным признакам
A
правильно. Я вот тоже люблю мониторинг по косвенным признакам
Троттлинг cpu влияет только на время ответа. И мониторить надо, в первую очередь именно его. А на троттлинг (и не только) смотреть глазами, если есть просадки по времени ответа
A
При этом появление троттлинга сильно зависит от паттерна использования cpu. Если у тебя большая амплитуда и есть высокие пики, то они будут скрести о cfs_quota в рамках cfs_period-а, но на большую часть нагрузки влиять будут незначительно.
A
В этом плане алерт на троттлинг легко может стать постоянно раздражающим false positive.
AS
у меня он и стал. в сайленсе почти все
A
@s2504s Короче, мониторь в первую очередь характеристики сервиса, а остальное просто собирай для получения общей картины при траблшутинге.
VS
Alexander
@s2504s Короче, мониторь в первую очередь характеристики сервиса, а остальное просто собирай для получения общей картины при траблшутинге.
Спасибо за развернутый ответ👍
IE
првиет!
Кто-то знает, как можно на лету при импорте оверрайтнуть датасурс для дашборда графаны?
В json он прописан тупо по имени, например
Кто-то знает, как можно на лету при импорте оверрайтнуть датасурс для дашборда графаны?
В json он прописан тупо по имени, например
"datasource": "MyLovelyDatasource"