A
Просто. Естественно. Компетентно. Рсислог
Size: a a a
2020 October 26
L
Alexander
imptcp в помощь. delimeter задается в конфиге.
Косяк обеих модулей tcp в "module always binds to all interfaces"
SP
Хм ... а будет пруф? Я вот поискал и как-то не нашел) Разве что свой appender писать, но это я как бы всегда могу
SP
Либо плохо искал, либо искал не то :-)
Для решения вопросов с мультилайном, кстати, тоже всё здесь же.
Для решения вопросов с мультилайном, кстати, тоже всё здесь же.
SP
А еще отдельного упоминания заслуживает вот этот ад в поисковике, да:
https://rsyslog.readthedocs.io/en/latest/configuration/modules/imtcp.html
https://rsyslog-doc.readthedocs.io/en/latest/configuration/modules/imtcp.html
https://www.rsyslog.com/tag/imtcp/
:)
https://rsyslog.readthedocs.io/en/latest/configuration/modules/imtcp.html
https://rsyslog-doc.readthedocs.io/en/latest/configuration/modules/imtcp.html
https://www.rsyslog.com/tag/imtcp/
:)
Предлагаю читать офф.доку.
Ну и это, сетевых протоколов для широких масс так-то всего два - TCP и UDP. Чего не так - рассказывай. Про логи по ICMP я не слышал.
Ну и это, сетевых протоколов для широких масс так-то всего два - TCP и UDP. Чего не так - рассказывай. Про логи по ICMP я не слышал.
SP
Ну или вот - https://www.rsyslog.com/doc/v8-stable/configuration/modules/imdocker.html.
Это не то, чтобы "он получает", а скорее "сам ходит и спрашивает".
Это не то, чтобы "он получает", а скорее "сам ходит и спрашивает".
AG
Друзья, подскажите куда смотреть, я использую локи в конце пайплайна, и при 200-300 логов в секунду получаю задержку, можно ли это победить без многопроцессов?
BG
Я честно отсмотрел, так и не нашел, где используется structured data с id meta или вообще structured data в каком-то виде ...
SP
Это надо запустить, и внезапно начнут structured data приходить. Те же экспешны точно именно так падают.
BG
Окей, если у вас java приложение, то его можно настроить
BG
Питоновское уже нельзя, как я понимаю :)
BG
То есть, найдя или написав либу, конечно, можно, но)
SP
там ещё проще
SP
Я джаву не знаю вообще, поэтому её привожу как пример.
SP
Что касается логирования в питоне - оно изначально сделано как расширяемое, и примерно по той же схеме: пишешь форматер, который передаст в метаданных всё, что хочешь.
SP
Ну то есть вот on-the-wire протокол - это вообще самая последняя проблема. Гораздо чаще встречается проблема в виде разработчика, которая называется "я-ленивая-жопа-и-не-хочу-делать-нормальные-логи".
SP
То есть чаще всего вопрос - не "чем собирать", а "как восстановить метаданные, которые разработчик просрал в процессе форматирования события"
AG
Друзья, подскажите куда смотреть, я использую локи в конце пайплайна, и при 200-300 логов в секунду получаю задержку, можно ли это победить без многопроцессов?
никто помочь не может?
GG
Сомнительно