AK
А можно посмотреть, что прямо сейчас логстэш делает?
Size: a a a
2019 April 24
AK
Сделать второй аутпут в файл?
T
Можно
T
Более того
T
Можно сделать аутпут в стдаут и смотреть прямо в реалтайме
AK
А то я что-то подозреваю, что он просто не может переварить всё. Сервачок дохлый, его процесс весь CPU схавал.
2019 April 27
AK
Но вот с помощью людей я перевел обработку лога с грока на csv и оно завелось.
2019 April 28
AE
Всем привет. Поделитесь пожалуйста, как вы мониторите mongodb?
ЕС
Привет, для внутренних проектов, которые разрабатываем и поддерживаем сами нам важно знать какие запросы вызывают проблемы (не достаточно индексов, не оптимальные запросы)
Для этого мы включаем профайлер в базах и самописным баш скриптом находим медленные запросы, которые профайлер положил в коллекцию profile, раз в день скрип шлет письма если есть новые неожиданно медленные запросы
Для этого мы включаем профайлер в базах и самописным баш скриптом находим медленные запросы, которые профайлер положил в коллекцию profile, раз в день скрип шлет письма если есть новые неожиданно медленные запросы
ЕС
Еще мы в этой схеме используем комментарии в запросах, в которых указываем максимальное время выполнения. Скрипт сравнивает время из комментария с реальным. Это для всяких длинных выгрузок и обработок
ЕС
Короче находим медленный запрос, разбираемся с ним, или помечаем в коде приложения что для него допустимо такое время.
ЕС
Профайлер считает медленными запросы длительностью больше 100 мс по умолчанию
ЕС
И пишет из в базу вместе с полезной информацией
ЕС
Просто бывает такое: при разработке все быстро, во время запуска - быстро.. а потом база наполняется и вылезают проблемы. Где то запросы не оптимальны, где то индексы не те
ЕС
Пользователи (внутренние) не прихотливы и могут молчать до последнего
AE
Спасибо Евгений, очень полезная информация. А есть практические примеры, например для zabbix?
ЕС
Не, увы.. специфика и масштабы не те
AE
С мониторингом вродебы понятно. Под свой проект адаптирую инфу. Может у вас есть советы по нагрузочному тестированию. Как оно у вас происходит и как вы мониторите этот процесс?
ЕС
Если коротко - никак, пользователи свои - меньше 100 операторов. Железо с огромным запасом. Intel optane на 500 гб даже стоит..
Прокты сложные и мы едва все успеваем)
Короче проще реагировать на проблемы постфактум, а не пытаться предусмотреть все. Но это специфика
Прокты сложные и мы едва все успеваем)
Короче проще реагировать на проблемы постфактум, а не пытаться предусмотреть все. Но это специфика
AE
А реплики или шарды как мониторите?