Ребят, подскажите чем лучше собирать и визуализировать метрику в 2020? Кодбаза у нас вся на питоне в монорепо, нет никаких микросервисов и докеров. У нас сотни короткоживущих процессов которые спавнятся кроном на разных машинах, в тч и на машинах разрабов и в разных облаках — все машины объединены zerotier vpn. Есть конечно и долгоживущие вебсерверы, есть и БД с которой тоже нужно забирать метрику.

Смотрю в сторону graphite и grafana тк раньше ими пользовался.

Для такого лучше всего подходит схема с пушем метрик в statsd, который, в свою очередь, будет отправлять все в графит или викториюметрикс. Вот тут описано, как записывать данные из statsd в вм - https://github.com/VictoriaMetrics/VictoriaMetrics/blob/master/README.md#how-to-send-data-from-graphite-compatible-agents-such-as-statsd

ибо всех солидно задалбал snmp

вот допустим мне надо метрики elastic'а в пром, хотя "метрики" тут громко сказано... всё что мне надо это cluster status из _cluster/health?pretty ну и мб чёнить из _cat/nodes?v , короче просто для того, чтоб алерты сделать на случай если кластер развалится. Вот как бы вы в этой ситуации сделали: курлом эту одну/две метрики брать и, например, с помощью textfile.collector отправлять в пром, либо брать сразу чёнить типа elasticsearch_exporter?

штоа? При чём тут путон? У меня сейчас это в 4 строки на баше сделано

вот допустим мне надо метрики elastic'а в пром, хотя "метрики" тут громко сказано... всё что мне надо это cluster status из _cluster/health?pretty ну и мб чёнить из _cat/nodes?v , короче просто для того, чтоб алерты сделать на случай если кластер развалится. Вот как бы вы в этой ситуации сделали: курлом эту одну/две метрики брать и, например, с помощью textfile.collector отправлять в пром, либо брать сразу чёнить типа elasticsearch_exporter?

та нет же, оно сейчас в збх отправляется, вопрос был в том как бы вы сделали для отправки в пром) Бэст практис что ли) Ну я понял, вариант "переписать в путон" тоже принимается)

та нет же, оно сейчас в збх отправляется, вопрос был в том как бы вы сделали для отправки в пром) Бэст практис что ли) Ну я понял, вариант "переписать в путон" тоже принимается)

правильно же мыслю: в под нужно лишь передать новый environment export GOGC=100, который перезапишет тот, что идёт по-дефолту в контейнере?

я пока тоже в его сторону склоняюсь

но там наверняка миллиард метрик которые придётся дропать или ограничивать экспортером если возможно, потому что существуют жёсткие ограничения по месту хранилища, политика партии пока такая, что "дропать всё, что явно не нужно"

но там наверняка миллиард метрик которые придётся дропать или ограничивать экспортером если возможно, потому что существуют жёсткие ограничения по месту хранилища, политика партии пока такая, что "дропать всё, что явно не нужно"