Телеграмм чат группы metrics

Aliaksandr Valialkin in Церковь метрик

18:16пожаловаться #1

AV

Vethopheth Lephanim

ну я понял, голос за экспортер, мб ещё мнения будут)

Если экспортер экспортит много лишних метрик, то их можно удалить с помощью секции metric_relabel_configs в scrape_config. См. https://www.robustperception.io/dropping-metrics-at-scrape-time-with-prometheus

Vethopheth Lephanim in Церковь метрик

20:11пожаловаться #2

VL

Aliaksandr Valialkin

Если экспортер экспортит много лишних метрик, то их можно удалить с помощью секции metric_relabel_configs в scrape_config. См. https://www.robustperception.io/dropping-metrics-at-scrape-time-with-prometheus

да я в курсе Сань, вопрос был в том как "правильнее" что ли)

Aliaksandr Valialkin in Церковь метрик

20:11пожаловаться #3

AV

Тогда не знаю )

20:22пожаловаться #4

k

Народ, всем привет. возможно глупость спрошу, но всё же. прометеус при старте валится в OOM. что делать, куда копать?
😭

20:52пожаловаться #5

N

Дать ему больше памяти)

20:59пожаловаться #6

k

Дать ему больше памяти)

ему целую ноду дали)) а ему все мало. выжрал 64Гб озу

21:05пожаловаться #7

N

Ну видимо слишком много метрик собираете или большой ретеншен. Или и то, и другое

21:06пожаловаться #8

k

Ну видимо слишком много метрик собираете или большой ретеншен. Или и то, и другое

метрик не мало, да.
а ретеншен выставлен минимально возможный (месяц + 2 часа), пром пишет в викторию

21:10пожаловаться #9

N

2 часа это же минимум как я помню. А месяц это многовато.
Зачем там месяц, если Виктория?

21:11пожаловаться #10

k

2 часа это же минимум как я помню. А месяц это многовато.
Зачем там месяц, если Виктория?

так у прома по-дефолту же месяц вроде. а 2 часа - это пользователь может уже настроить

21:12пожаловаться #11

N

Дефолт 2 недели

21:12пожаловаться #12

k

Дефолт 2 недели

значит поправили уже. когда настраивал, был дефолт в 30 дней

Aleksey Shirokikh in Церковь метрик

21:15пожаловаться #13

AS

дефолт всегда был в 15 дней.

Aleksey Shirokikh in Церковь метрик

22:08пожаловаться #14

AS

надо оставить просто два часа

Roman Khavronenko in Церковь метрик

22:08пожаловаться #15

RK

krakazyabra

Народ, всем привет. возможно глупость спрошу, но всё же. прометеус при старте валится в OOM. что делать, куда копать?
😭

Опции следующие:
- уменьшить scrape-interval
- уменьшить GOGC
- тюнинговать remote-write https://prometheus.io/docs/practices/remote_write/
- игнорировать ненужные метрики
- определить самые большие метрики и что-то с этим сделать)

prometheus.io

Remote write tuning | Prometheus

An open-source monitoring system with a dimensional data model, flexible query language, efficient time series database and modern alerting approach.

22:09пожаловаться #16

k

An open-source monitoring system with a dimensional data model, flexible query language, efficient time series database and modern alerting approach.

Roman Khavronenko

Опции следующие:
- уменьшить scrape-interval
- уменьшить GOGC
- тюнинговать remote-write https://prometheus.io/docs/practices/remote_write/
- игнорировать ненужные метрики
- определить самые большие метрики и что-то с этим сделать)

prometheus.io

Remote write tuning | Prometheus

спасибо)

Aleksey Shirokikh in Церковь метрик

22:11пожаловаться #17

AS

Roman Khavronenko

Опции следующие:
- уменьшить scrape-interval
- уменьшить GOGC
- тюнинговать remote-write https://prometheus.io/docs/practices/remote_write/
- игнорировать ненужные метрики
- определить самые большие метрики и что-то с этим сделать)

prometheus.io

Remote write tuning | Prometheus

An open-source monitoring system with a dimensional data model, flexible query language, efficient time series database and modern alerting approach.

#oom

22:12пожаловаться #18

k

а какие разумные пределы есть для scrape_interval?

22:15пожаловаться #19

k

если сейчас стоит 30 секунд, то 1 минута же не сильно на погоду повлияет?