Size: a a a

Церковь метрик

2020 January 23

yL

yuyu L16+8E in Церковь метрик
А этот же бенчмарк повторить на NUC, как Clickhouse сделал, не планируете?
И ещё вопрос: в статье сказано, что у VM 1.2 байта/точку получилось. В результатах Clickhouse-а пишут - 1.3 байта/точку, при том, что CH, в отличие от вас,  температуру как двойную синусоиду с шумом, т.е. не совсем случайную, генерили. Так почему в CH компрессия хуже оказалась?
источник

AV

Aliaksandr Valialkin in Церковь метрик
Andrey Afoninskiy
я так понимаю получится один длинный временной ряд?
Один ряд получится, если наборы лейблов у всех записей будут одинаковые. Как только значения лейблов начинают отличаться, создаются новые ряды.
источник

AV

Aliaksandr Valialkin in Церковь метрик
yuyu L16+8E
А этот же бенчмарк повторить на NUC, как Clickhouse сделал, не планируете?
И ещё вопрос: в статье сказано, что у VM 1.2 байта/точку получилось. В результатах Clickhouse-а пишут - 1.3 байта/точку, при том, что CH, в отличие от вас,  температуру как двойную синусоиду с шумом, т.е. не совсем случайную, генерили. Так почему в CH компрессия хуже оказалась?
У нас нет такого NUC для тестов :( Было бы здорово, если бы кто-нибудь с доступом к NUC мог прогнать бенчмарк на нем. Все использованные скрипты для бенчмарка упомянуты в статье, так что это не должно быть сложно. Если что, мы готовы помочь с решением проблем, если они возникнут во время бенчмарка.

По поводу сжатия данных - у КХ и ВМ используются разные алгоритмы. Скорее всего, у ВМ алгоритм немного эффективнее сжимает данные.

Вот тут можно почитать про алгоритмы сжатия КХ: https://www.altinity.com/blog/2019/7/new-encodings-to-improve-clickhouse
вот тут - про алгоритмы сжатия в вм  - https://medium.com/faun/victoriametrics-achieving-better-compression-for-time-series-data-than-gorilla-317bc1f95932
источник

ЕО

Евгений Омельченко in Церковь метрик
yuyu L16+8E
А этот же бенчмарк повторить на NUC, как Clickhouse сделал, не планируете?
И ещё вопрос: в статье сказано, что у VM 1.2 байта/точку получилось. В результатах Clickhouse-а пишут - 1.3 байта/точку, при том, что CH, в отличие от вас,  температуру как двойную синусоиду с шумом, т.е. не совсем случайную, генерили. Так почему в CH компрессия хуже оказалась?
В статье про кликхауз неоптимальная по сжатию схема просто, она оптимизирована под низкое потребление CPU и памяти, как видно
источник

ЕО

Евгений Омельченко in Церковь метрик
Можно сжать гориллой + zstd и получится лучше
источник

DZ

Denys 💛📈 💫 Zhdanov in Церковь метрик
Andor
если ты про кластер, то он есть в бесплатных
Но репликации там нет.
источник

A

Andor in Церковь метрик
конечно
источник

AD

Artem D. in Церковь метрик
всем привет. подскажите плз. как в prometheus получить значение нужного label?
источник

AD

Artem D. in Церковь метрик
вроде никак(
источник

RK

Roman Khavronenko in Церковь метрик
Artem D.
всем привет. подскажите плз. как в prometheus получить значение нужного label?
источник

A

Andor in Церковь метрик
Artem D.
всем привет. подскажите плз. как в prometheus получить значение нужного label?
что значит "получить значение"? куда получить?
источник

AD

Artem D. in Церковь метрик
через alertsmanaget отправить и в графане отобразить
источник

НА

Наталья Александровна in Церковь метрик
можно ли использовать TimescaleDB для хранения метрик, или это плохое решение
источник

A

Andor in Церковь метрик
Разрешаю
источник

GM

Gleb Mekhrenin in Церковь метрик
в целом я думаю никто не против, но стоит конечно узнать у опытных нюансы исопльзования
источник

AV

Aliaksandr Valialkin in Церковь метрик
Наталья Александровна
можно ли использовать TimescaleDB для хранения метрик, или это плохое решение
Оно подойдет при следующих условиях:
- если вы используете postgresql и хотите одним запросом вытягивать данные  приложений плюс данные метрик
- если набор дополнительных атрибутов (labels, tags) для временных рядов заранее известен и не будет меняться
- если объем данных для метрик небольшой (до 100 миллионов строк)

В остальных случаях советую посмотреть на специализированные БД для метрик вроде victoriametrics
источник
2020 January 24

NA

Nikolay Avdushkin in Церковь метрик
Напомните, названия метрик можно как-то в регулярку запихать? Разные версии экспортеров стоят, где-то метрики оканчиваются на _free где-то на _free_bytes
источник

A

Andor in Церковь метрик
в регулярку куда?
источник

A

Andor in Церковь метрик
ты хочешь одним запросом два вида метрик выгребать?
источник

NA

Nikolay Avdushkin in Церковь метрик
да
источник