YB
поэтому можно начать с relp и посмотреть
Size: a a a
2021 May 31
YB
но у relp раньше было ограничение на 128k по длине сообщения сверху
YB
что-то там дальше чинили, но я после того, как прод положил, больше не экспериментировал с этим 🙂
YB
очереди надо на всех rsyslog-ах в пути делать
YB
разница только в размере
YB
и надо ли диск, или хватит в памяти
YB
все вышесказанное - мое имхо, основанное на личном опыте
YB
к слову, локальный буфер на юникс-сокете у меня ни разу не кончался на моих нагрузках с прошлой работы
YB
только на тестах
YB
но у меня были очереди, да
YB
rsyslog быстро вычитывал из сокета и клал в очередь
YB
а вот с балансировкой печаль
PD
Не работает надежно, так как если включить логгирование всех входящих запросов (а половина библиотек это позволяет), то сразу все ПДН полетят в логи. Нормальные требования - принципиальная невозможность попадания секретов в логи.
Впрочем, если аудита не будет, то можно не заморачиваться.
Впрочем, если аудита не будет, то можно не заморачиваться.
YB
это tcp, поэтому, пока соединение живо, все будет ехать через один эндпоинт
YB
но есть опция, чтобы оно пересоздавалось после N сообщений
YB
можно сделать N=1 :trollface:
YB
тогда логи в кафку, потом какой-то пакет для анонимизации/деперсонализации, снова в кафку и в хранилище
YB
какие-то штуки мне встречались, но названий не вспомню.. то ли гугл, то ли фейсбук открывали что ли
PD
В кафку нельзя отправлять ПДН (если делать нормально). Нужно резать или до отправки в кафку или вообще внутри.
До отправки легче
До отправки легче