ну по сути у меня задача аналогичная - доставлять логи в сентри не напрямую курлом, а через файлик

редис тоже очень неплохо прикладывается

ммм... https://github.com/sentry-extensions/cyclops

возможно тебе не надо даже ничего делать

и просто поднять циклоп

ну я и искал решение, что бы ничего не делать
но просто любой синхронный вызов в пхп коде - это риск таймаутов и кончившихся воркеров

пусть каждый сервак пишет в свой циклоп, и циклопы уже будут доставлять все в сэнтри

почему не нашел циклоп?

понимашь, каждая новя зависимость - это риск
а не начнет циклоп таймаутить? и т.п. и т.д.
с файлами все более прозрачно - зная объем записи и конкурентность можно посчитать вероятность проблем
там, где она высокая, к слову, мы логи по udp отдаем сразу из php
по-этому в первую очередь смотрел решения через файлы

у тебя никогда файловая система не отваливалась в проде?)

> зная объем записи и конкурентность можно посчитать вероятность проблем
там, где она высокая

если тебе все это известно достаточно провести симуляцию используя готовое решение

циклоп работает по тому же принципу просто позволяет тебе это хэндлить "не только для похапе"

фс может посыпаться, но не на всех машинах сразу, а значит просто вылетит из балансера

ай как хочешь

и потому ты ищешь "готовое решение очередей на файлах"

бля, ты сам себе противоречишь. "новые штуки это новые риски потому дайте мне новую штуку которая юзает сторадж известный". Циклоп тоже файлы юзает

ну да, эмуляция это верно... но в данный момент у нас нет эквивалетного проду стенда, что бы нагрузки эмулировать

ну по дефолту он юзаает память или редис или мемкеш как я вижу
но да, можно написать свое

но циклопа я не находил на самом деле. так что спасибо, отдам изучать в sre, возможно он и подойдет

Все же поясню. Мне допустимы новые штуки, которые будут читать файл, ибо там риски максимальные - потеря логов. Вероятность, что оно тронет продакшн - низка. А из прод кода будет лишь запись в файл, которую просто математически можно оценить.
А циклоп встает проксей, значит остается курл, который может таймаутить. Опять же, правильно выставленные таймауты могут спасти, но все-равно дадут ощутимый сайд-эффект (время ответа).