SK
в graphite-clickhouse схемка по которой ясно кто пишет а кто читает
Size: a a a
2020 April 18
SC
а особо альтернатив нет
SK
ну в go-carbon вроде сжатие завозили, вот только формат хранения я так и не удосужился глянуть, это по прежнему куча файлов по директориям или один файл
SC
есть всякая дичь вроде кассандры https://github.com/grafana/metrictank, но лучше уж кликхаус
b
а особо альтернатив нет
Аа понятно, а то мне сначала казалось что метрика отправляется щедрому Яндексу. который за меня это все хранит. Не все еще потеряно.
SK
Для понимания обо что ударишься цифры нужны: сколько метрик вообще, сколько их пишется в бек в сек, сколько их читается в сек.
AA
еще можно навесить на входе carbon-c-relay - может оказаться удобно
AA
г какое-нибудь фильтровать
SK
или загнать метрики в кафку :)
b
А с графитом+графаной можно отображать редкие уникальные ивенты на графиках? Например кто-то задеплоил в прод, и на графике появляется отметка “васян задеплоил rev# в прод”?
AA
в go-carbon, carbon-clickhouse и в moira для алертинга!
SK
это события, можно но желательно в графане подключить систему хранения событий (логов). Собрать комплексные дашборды при этом не проблема
SK
а в нотации графаны вот эти отображения называются аннотейшаны
IE
У меня такой вопрос, в пром вроде смерджили локальную таймзону в /graph
а где её настроить?
а где её настроить?
AS
Она в new
AS
Берется из браузера
IE
ага, нашёл уже, в версиях 2.16.0+, в новом react интерфейсе
IE
Галочка
VS
Общий совет: если уже много работал с графитом то с ним можно продолжать работать у него апи проще (если уже его знаешь :) ) чем пром. Если в стеке уже есть пром то лучше думаю смотреть в сторону VM
а еще если нравится графитное апи, можно взять carbonapi а бэкэндом к нему что угодно умеющее в PromQL (правда функции будут накатываться на стороне carbonapi, а не на стороне бэкэнда)
2020 April 19
AV
да, вот с коллегой думаем об этом.
несколько промов, у каждого свой serviceMonitorSelector
несколько промов, у каждого свой serviceMonitorSelector
Нашел классную статью по горизонтальному масштабированию прометеуса - https://medium.com/wish-engineering/horizontally-scaling-prometheus-at-wish-ea4b694318dd