PD мне выходит 10-20$/мес, а opsgenie сразу начинается с 46, если нужен безлим на нотификации для хотя бы двух человек (25 уведомлений в базовом тарифе - мало, а 0.35$ за дополнительные какой-то грабёж)

понятно спасибо что поделились

victorops по цене радует, но не умеет в звонки, мне это важно

у меня народ кто как настраивает нотификации но лично у меня только в приложеньку. звонков судя по графику не так что бы много

Подскажите пожалуйста, как решить след задачу. Есть в прометее app_metric_name, нужно получить ее максимальное значение которые было в течении месяца.

посмотри tcpdump'ом что gostatsd отправляет

max_over_time(app_metric_name[30d])

благодарю

Привет. Не холивара ради, интересно спросить. А кто реально ClickHouse для метрик использует? Без карбона\графита, а вот прям метрики в него пишет и на дашборды выводит. Тут(или нет, не нашёл) кто-то писал, что можно так делать умеючи. Вот хоть какой нить бестпрактис.

Смотрел в сторону организации данных как в https://github.com/Percona-Lab/PromHouse, но запись пипец какая медленная получатся. (Особенности распаковки line protocol-а :( )

Какие ещё идеи?

а зачем так делать?

Хочется как в инфлаксе, но без инфлакса. Что бы базы разные, а не все одной кучей, со своими ретеншн полиси.

я вот интереса ради смотрел что от graphite-clickhouse идет в CH, когда я легко и  непринужденно в веб-интерфейсе графаны добавлял метрики в графане - так сказать зрелище не для слабонервных, какие портянки запросов туда идут

вы хотите тоже такие портянки руками делать?

хотя это может мне так показалось просто, т.к. не специалист в БД

в авито как-то это обходили. Они формировали таблицу для краткосрочных результатов

может можно на этой основе что-то придумать

Портянки запросов не большая проблема, если честно. Тем более есть плагин с макросами, который +- подходит.

может выбором datasource в графане можно такое решить?

Да, это вполне реально, у нас в проде уже год почти живет. Есть свои нюансы, но работает очень годно и, кстати, быстрее инфлюкса.
Структура даных - плоская таблица, по одной на межурмент. Сейчас кластер кликзауза у нас пинимает поток из 170+ тысяч метрик в секунду, так что с записью у кликхауза все ок

У нас есть 100500 команд со своими компонентами, которые могут хранится произвольное количество времени. Кто-то месяц, кто-то два, кому-то пол года надо. Все эти 100500 компонент хранятся и пишутся в свои базы, которые просто менеджить и в них разобраться.

В случае с prometheus/victoria/graphite база одна, разграничения никакого. Если метрик оооочень много, то в той же графане, подсказку по полям(promethues) просто не дождёшься.

В графане в датасорсе для прометея нет жёстко заданных фильтров, хотя было бы прикольно что бы она насильно добавляла в запросы фильтр к метрикам.

В Graphite тоже такого нет.