Size: a a a

2021 June 23

SS

Sergey Shevelev in pro.kafka
Если падает не лидер, то все работает с задержкой 1,5 сек
источник

SS

Sergey Shevelev in pro.kafka
И консьюмер вроде можно статически прибить к партиции . Не ?
источник

SB

S B in pro.kafka
Каждый раз, когда читается рекорд, надо комитить офсет, иначе в следующий раз потребитель из той же консьюмер группы получит тот же рекорд снова и так до бесконечности. «Закомитить» — это операция на запись, поэтому нужен лидер.
источник

SS

Sergey Shevelev in pro.kafka
Ок. Спасибо
источник

SS

Sergey Shevelev in pro.kafka
И ещё. Какие у кого есть временные задержки на время выбора лидера ?
источник

SS

Sergey Shevelev in pro.kafka
Какими параметры можно использовать для ускорения процесса?
источник

АА

Алексей Артамонов... in pro.kafka
всем привет. подскажите может кто делал kafka connect sink?
источник

АА

Алексей Артамонов... in pro.kafka
мне надо в db2 данные класть
источник

SS

Sergey Shevelev in pro.kafka
Понятно. Но разве не могу считывать офсеты без коммита?
источник

ЧП

Чёрный Плащ... in pro.kafka
В общем случае это неверно
В группе каждому консьюмеру даётся набор партиций, и он без коммита может сколь угодно долго читать из них. Пока не завершит работу, или не будет реьаланса или он не закоммитит
источник

ЧП

Чёрный Плащ... in pro.kafka
Если конечно не стоит авто.коммит
источник

SS

Sergey Shevelev in pro.kafka
Автокоммит выключен
источник

ЧП

Чёрный Плащ... in pro.kafka
Считывать оффсеты?
А зачем?
источник

SS

Sergey Shevelev in pro.kafka
Попробую объяснить . У меня идет входящий поток сигналов, все хорошо обрабатывается . Падает не лидер - все хорошо. Пауза 1.5 сек - норм. Падает лидер… Пауза 8 сек. - не норм. Поэтому в процессе выборов хочу считывать поток, пусть и не коммитить. Главное конечное приложение не будет иметь большой паузы
источник

SS

Sergey Shevelev in pro.kafka
Как то так. Постарался внятно
источник

SS

Sergey Shevelev in pro.kafka
Сигналы в Кафке хочу продолжать обрабатывать
источник

ЧП

Чёрный Плащ... in pro.kafka
Ну то есть не оффсеты а сами сообщения. Верно?
источник

N

Nick in pro.kafka
кстати а если брокер только один будет, выборы же не потребуются и соответственно проблем с лидерами тоже не будет? (да я понимаю что тогда и данных может не стать)
источник

SS

Sergey Shevelev in pro.kafka
Верно
источник

SB

S B in pro.kafka
Читать можно, но зачем это? Я не очень понимаю сценарий использования.
источник