PM
Size: a a a
2021 November 02
PM
Если нужны distributed Lock то можно глянуть в сторону zookeeper
PM
Все легко и просто поднимается через docker
PM
У редиса Локи тоже есть https://redis.io/topics/distlock
AZ
К воркеру может прийти OOM, может отвалиться сеть, может весь сервер перезапуститься, в нем может быть баг и он либо упадёт, либо уйдёт в бесконечный цикл. Далеко не всегда воркер сможет доделать свой таск
PM
Реплиуируемый лог Kafka решает проблему
AZ
Ну да. А все эти штуки с пайпами и очередями в памяти нет
PM
В кафке меседж считается непрочитанным пока еонсумер не сделал commit
EH
А ack в реббите не то же самое?
PM
Та же хрень
JP
Спасибо ребята, видно придётся доп. сервис юзать...
p
Вот не любишь ты людей))
JP
Людей я люблю, мой вопрос изначальный - есть ли у Питона, что-то подобное(хитрые асинхронных очереди) в либах, чтобы не разбираться с отдельной системой, не изучать ее...
AZ
Тут дело в том, что обработка сообщений с гарантиями at least once/exactly once это задача прямо Сложная, для которой пришлось придумать много теории, и реализовать сложные (внутри) сервисы. Но как только оказывается, что полноценные гарантии тут не нужны, и можно иногда терять или дублировать сообщения, то все становится значительно проще
AZ
Рома говорит, что это Максим не любит людей, предлагая им zeromq
JP
Ок, я не понял)))
MV
Зато без «ненужного» сервиса с брокером)
2021 November 04
PR
возьмите redis pub-sub, он легкий
2021 November 09
DB
P
Звучит сказочно