GG
Не путай 3rd party и свою разработку
Size: a a a
2020 May 24
СХ
Кася это вообще отдельная история
да кася это рай по отношению к hbase+hdfs с регионами и проблемами консистемтности и наличия файлов
ДА
Да этих ребят спас бы healthcheck, который ходил в кэш. Пока такого нет уже ничего не поможет
Понимание того, что доступность сервисов лучше мониторить на каждой ноде не сразу приходит
AS
🙄у меня одна кассандра писала логов по 300 мб в день с инстанса
А зачем собирать с нее логи? Мониторить и ошибки(которые должны быть редко)
СХ
файлы висят в работе а физически их уже нет
ДА
Я так и вовсе мечтаю, чтобы во всех подконтрольных мне приложениях был урл, который по запросу туда пробует записать во все места, куда приложение может что-то писать (БД, редис и прочие эластики) и алертило если что-то отвалилось
СХ
Я так и вовсе мечтаю, чтобы во всех подконтрольных мне приложениях был урл, который по запросу туда пробует записать во все места, куда приложение может что-то писать (БД, редис и прочие эластики) и алертило если что-то отвалилось
🙄ну я не мечтал, у меня гощница именно этим и занималась 45% времени писала таку приблуду для всех приложений программно-аппаратного комплекса
СХ
правда мне пришлось столько мозги тразать директорам....
ДА
🙄ну я не мечтал, у меня гощница именно этим и занималась 45% времени писала таку приблуду для всех приложений программно-аппаратного комплекса
Фу, планку понизил. Джавистки же наше всё
СХ
но логи всё равно приходилось собирать
СХ
Фу, планку понизил. Джавистки же наше всё
увы, джависток не было там, была тимлид С
ДА
но логи всё равно приходилось собирать
Ну так это и не панацея. Долгие ответы на запросы сложнее пинговых те же так не увидишь
ДА
Но жить всё равно становится проще, особенно если парк ушёл за пределы одной стойки и общего свитча на всех
MK
Gregory Tsvetkov
Поставить и настроить elk - 1 день работы. Можно ещё elastalert к слаке прикрутить, он тебе будет о трейсбеках алерты слать. grep какой-то...
Примерно 10 тыс уведомлений в день? Или наоборот ноль?
GG
Ну так это и не панацея. Долгие ответы на запросы сложнее пинговых те же так не увидишь
Это решается отдачей гисто в метриках
GG
Чтобы сама приложуха строила табличку по персентилям. Иначе ты умрёшь
GT
Примерно 10 тыс уведомлений в день? Или наоборот ноль?
По разному бывает. Бывало и больше 10к, когда одно приложение с багом задеплоили. Получили алерты и сразу пофиксили.
СХ
Это решается отдачей гисто в метриках
🙄гисто это боль
GG
Gregory Tsvetkov
По разному бывает. Бывало и больше 10к, когда одно приложение с багом задеплоили. Получили алерты и сразу пофиксили.
Был бы сентри - получили одно жирное уведомление 🤷♂
ДА
Чтобы сама приложуха строила табличку по персентилям. Иначе ты умрёшь
Ну для того же постгрес есть powa/pganalyzer, там понагляднее будет