Size: a a a

2020 December 17

KS

Kirill Saltykov in Sysadminka
Aleksey {:€
А подскажите во что лучше собирать логи с самописных веб приложений на джанге? Желательно чтобы можно было прямо гетами или постами пулять данные на лог сервер...
Мне кажется ELK стэк для этого перебор.
Кстати тоже интересно что-то легковесное для логов, хоть и с ноды/го
источник

S

Slach in Sysadminka
Aleksey {:€
А подскажите во что лучше собирать логи с самописных веб приложений на джанге? Желательно чтобы можно было прямо гетами или постами пулять данные на лог сервер...
Мне кажется ELK стэк для этого перебор.
я бы попробовал vector.dev +  loki вполне себе ОК
логирование лучше всего в JSON сделать
тогда можно vector.dev + clickhouse + MATERIALIZED JSONExtract - но это надо быть Убером =)

если появится vmlog то может быть на него в будующем свитчнуться на него с loki
источник

T

TSHAWYTSCHA in Sysadminka
Боты пожаловали
источник

AS

Alexandr Savichev in Sysadminka
Microsoft и ряд других крупных поставщиков антивирусного ПО отреагировали на раскрытие исследователем безопасности метода удаленного отключения их защитных решений с помощью безопасного режима Windows. Исследователь Роберто Франческетти (Roberto Franceschetti) опубликовал в своем блоге видео и PoC-код для эксплуатации уязвимости, позволяющий отключать антивирусные продукты от Microsoft (Защитник Windows), Avast, Bitdefender, F-Secure и «Лаборатории Касперского»



https://www.securitylab.ru/news/514867.php
источник

L

Lev in Sysadminka
Roman
скриншот из кибаны вроде бы противоречит написанному. Нужно разбираться.
Я бы лишний раз не трогал её без особенной на то необходимости. Elastic+Logstash+Kibana - рабочий, но жутко неудобный стек. Я стараюсь держаться подальше от каждого из этих продуктов. Если и приходится использовать, то как "необходимое зло". Вот не нравятся они мне. Примерно так же, как не нравится MS Exchange для почты. Это всё могучее, с тыщщей фич. Но такое громоздкое и неудобное...

Как уже говорилось выше - существуют более удобные решения. Рекомендую не переть против рынка и не пытаться через боль и страдания использовать неудобные и непопулярные решения со слабой или отсутствующей поддержкой сообщества. Хочешь классный мониторинг - возьми victoriametrics(вдохновленная prometheus, но избавленная от ряда недостатков tsdb) для метрик, vmalert для алертов и grafana для визуализации. Можно еще добавить loki для логов и той же графаной визуализировать логи прям на том же дашборде что и графики. Выглядит очень удобно: узрел на графике скачок по latency и сразу видишь что в логах было в это же время. Если своя разработка имеется - jaeger-ом можно собирать трейсы. И показывать рядом с логами и метриками. В теории выглядит очень круто. На практике трейсинг пока не щупал.
источник

K

Kirill in Sysadminka
Lev
Я бы лишний раз не трогал её без особенной на то необходимости. Elastic+Logstash+Kibana - рабочий, но жутко неудобный стек. Я стараюсь держаться подальше от каждого из этих продуктов. Если и приходится использовать, то как "необходимое зло". Вот не нравятся они мне. Примерно так же, как не нравится MS Exchange для почты. Это всё могучее, с тыщщей фич. Но такое громоздкое и неудобное...

Как уже говорилось выше - существуют более удобные решения. Рекомендую не переть против рынка и не пытаться через боль и страдания использовать неудобные и непопулярные решения со слабой или отсутствующей поддержкой сообщества. Хочешь классный мониторинг - возьми victoriametrics(вдохновленная prometheus, но избавленная от ряда недостатков tsdb) для метрик, vmalert для алертов и grafana для визуализации. Можно еще добавить loki для логов и той же графаной визуализировать логи прям на том же дашборде что и графики. Выглядит очень удобно: узрел на графике скачок по latency и сразу видишь что в логах было в это же время. Если своя разработка имеется - jaeger-ом можно собирать трейсы. И показывать рядом с логами и метриками. В теории выглядит очень круто. На практике трейсинг пока не щупал.
На чем это лучше всего поднимать? Контейнеры? Виртуалки? Бареметал?
источник

L

Lev in Sysadminka
Kirill
На чем это лучше всего поднимать? Контейнеры? Виртуалки? Бареметал?
В контейнерах - точно удобно. А там уже по потребностям. У меня в виртуалке крутится и не кашляет. Оверхед на контейнеры, ес что, минимален.
источник

R

Roman in Sysadminka
у меня на ВМ в облаке yandex. Коллега попросил поставить и настроить.
источник

L

Lev in Sysadminka
И это. Совершенно точно стоит все это богатство описывать в каком-нибудь репозитории, чтобы потом the whole thing поднимать из кода. Не надо подкладывать бинари и конфиги на сервер руками. Ибо у меня сейчас далеко не самая разнообразная инфраструктура. Но в проекте monitoring - 140 файлов в 49 директориях. Конфиги, докерфайлы, скрипты экспортеров. Без бинарей.

Если вдруг случится разбираться что сломалось или на другом сервере развернуть подобное - устанешь столько конфигов просматривать и подкладывать))
источник

K

Kirill in Sysadminka
Lev
И это. Совершенно точно стоит все это богатство описывать в каком-нибудь репозитории, чтобы потом the whole thing поднимать из кода. Не надо подкладывать бинари и конфиги на сервер руками. Ибо у меня сейчас далеко не самая разнообразная инфраструктура. Но в проекте monitoring - 140 файлов в 49 директориях. Конфиги, докерфайлы, скрипты экспортеров. Без бинарей.

Если вдруг случится разбираться что сломалось или на другом сервере развернуть подобное - устанешь столько конфигов просматривать и подкладывать))
я уже просто не хочу руками это делать, мне не нравится, я теперь первым делом иду в дженкинс😁😁😁
источник

L

Lev in Sysadminka
Я же в общий чат пишу. И уточнил для тех, у кого есть еще привычка правки на серверах ручками вносить =)
источник

ВИ

Вадим Исаканов... in Sysadminka
Если кто вдруг еще не заметил - напомню про сегодняшний митап c Red Hat & ITSumma
https://sysadminka.timepad.ru/event/1505843/ #Sysadminka
источник

AS

Alexandr Savichev in Sysadminka
🔥
источник

T

TSHAWYTSCHA in Sysadminka
надо будильник поставить
источник

i

inqfen in Sysadminka
Lev
Я же в общий чат пишу. И уточнил для тех, у кого есть еще привычка правки на серверах ручками вносить =)
Это ужасные люди
источник

i

inqfen in Sysadminka
А потом ужасно за ними разбираться, а что же там блин делается на сервере
источник

AS

Alexandr Savichev in Sysadminka
А ссылка когда придёт?
источник

ВИ

Вадим Исаканов... in Sysadminka
когда сделаем
пока не сделали
источник

ВИ

Вадим Исаканов... in Sysadminka
М, за час до митапа же на мыло
источник

AS

Alexandr Savichev in Sysadminka
Мне не пришло
источник