Ну mosquitto вроде все юзают

Что значит «серьезных»? Серьезных в плане надежности гарантий доставки и стратегий? Серьезный — в смысле с кучей энетерпрайз-левел инструментов вокруг? Серьёзные в смысле с хорошим маркетингом?

Так-то RabbitMQ очень даже «серьезный» по многим параметрам, но я так понимаю ты чего-то другого ищешь.

Коллеги! Спасибо огромное за ответы!
Ищем замену Pulsar. Но важна функция подписания на нужные топики, чтобы избежать пулинга. Время реакции измеряется 10мс и хочется убрать избыточную нагрузку на сеть, т.к. слишком много топиков. Решение энтерпрайз. Короче говоря, решение типа пульсара или кафки, но с возможностью подписываться самостоятельно на нужные топики.

@Lanayx может направишь на путь истинный?

Спасибо за наводку! С виду, подходит 👋

Но вообще ты в курсе, что пуш-стратегия очень плохо масштабируется? И на большом количестве топиков система не будет работать быстро.

а пробовали mqtt on pulsar?

я так понял что хочется подписаться на миллион топиков по маске

Интересный вопрос. Но может основная причина в том ,что топиков миллион ? Мне было бы очень интересно узнать детали. В телеграммах давно ведётся спор о том нужно ли решение , которое должно поддерживать миллион топиков и даже больше. И нужен ли вообще миллион топиков. На пример в базах ведь никто не создаёт миллион таблиц и если кто то сделает миллион таблиц , то это будет новаторский подход ) . Какфка ведь без kafka Raft рассчитана скорее на сотни тысяч . В известной всем статье пишут про 200k партицый .

А причём тут Raft?

а там самая проблема, что когда падает контроллер, то нужно делать много работы с нуля и это займет очень много времени, а рафт даст возможность просто переключится на другой.

Когда нет возможности подписываться по маске или ключу, люди начинают изобретать миллион топиков

Для примера в упрощенном виде: 10млн пользователей. У каждого по 100 проектов в среднем. В каждом проекте примерно по 200 топиков.
При этом под каждым пользователем топики (чаще всего) изолированы.

Рафт это алгоритм консенсуса.

Альтернатива Паксосу.

это ведь очевидно и давно известно, что такое рафт, паксосос, чем они отличаются между собой и какие отличия от ругих похожих алгоритмов, например от ZAB.

ну значит я правильно понял) хочется логических топиков, а не физических. Если уже есть кластер пульсара развернут, то попробуйте mop, сам не пробовал, но обещают что работает

Кстати вот где-то было описание, за счет чего переход к рафту так повысил производительность? За счет того, что не надо на каждый чих по сети в ZK бегать?

Или в имплементации рафта в кафке что-то еще интересное есть