Мы тут недавно на анализе логов мониторинг сделали - прям огонь
о. я похожую фигню к кластеру nginx прикручивал ( ( балансер + 4 апстрима) + ( балансер + 4 апстрима) + пара хапрокси с кипэлайвом поверх) экспортится в прометеус, оттуда - в графану. три дня убили на поиск опечаток в запросам по метрикам и на корректный формат записи логов
о. я похожую фигню к кластеру nginx прикручивал ( ( балансер + 4 апстрима) + ( балансер + 4 апстрима) + пара хапрокси с кипэлайвом поверх) экспортится в прометеус, оттуда - в графану. три дня убили на поиск опечаток в запросам по метрикам и на корректный формат записи логов
Во у нас похоже. Только логи льются через наш комбайн в ластик, а оттуда графаной
теоречтически, оно в таком виде должно выдержать кровавый энтерпрайз. по идее, вширь оно без проблем промаштабируется, сиди только апстримы и бэкэнды добавляй. там вопрос в связанных сервисах
т.е. нет смысла нам масштабироваться, к условно обработке N запросов в секунду с респонс-таймом в <50 мсек, если смежный сервис, чужой, может дать максимум 1/2 N