Size: a a a

2019 April 23

A

Alex in Data Engineers
Регион точно есть?
источник

MB

Mikhail Butalin in Data Engineers
ага, есть
источник

MB

Mikhail Butalin in Data Engineers
в интерфейсе сверяю имя региона
источник

A

Alex in Data Engineers
Тогда только в логи мастера и регион сервера который сплитать собираетесь
источник

MB

Mikhail Butalin in Data Engineers
ок
источник

MB

Mikhail Butalin in Data Engineers
thnx
источник

A

Alex in Data Engineers
Отдаёте команду на сплит и смотрите что проскакивает
источник

A

Alex in Data Engineers
Обычно там норм все пишет почему не смогло или отменило
источник

RB

Ramzan Bekbulatov in Data Engineers
Приветствую!
источник

RB

Ramzan Bekbulatov in Data Engineers
Появилась ровно такая же проблема: https://stackoverflow.com/questions/52435151/kafka-not-receiving-messages-when-indicating-group-id-in-python

При использовании group_id в консюмере kafka-python не удаётся получить ни оффсет группы, ни сами данные. Через другие инструменты смотрю — групп не появляется.
источник

RB

Ramzan Bekbulatov in Data Engineers
Топик-стартер в комментариях написал:

@noname yeah I've finally solved it. That was my issue: omkafka config file partitions.number attr was 1 by default, we changed it to 100 as was needed and it started working! I hope it will help you –
источник

RB

Ramzan Bekbulatov in Data Engineers
Но что-то не понимаю как partitions.number может быть вообще связано с этим.
источник

RB

Ramzan Bekbulatov in Data Engineers
Кто-то сталкивался с похожим?
источник

MB

Mikhail Butalin in Data Engineers
Что-то я подвис...
Залезаю в свойства родительского региона(hbase), а там compaction progress 984.32%
источник

A

Alex in Data Engineers
ну вот и ответ, пока проходит компакшен то вроде он не сплитится =)
а почему в 980 хз
источник

MB

Mikhail Butalin in Data Engineers
уже 240% =))
источник

MB

Mikhail Butalin in Data Engineers
кстати, а можно как-то мониторить ход выполнения split ?
источник

MB

Mikhail Butalin in Data Engineers
что-то я ничего вразумительного на эту тему не нашёл
источник

A

Alex in Data Engineers
сам по себе он не сильно много делает
только разносит где кто держит ключи
до первого компакшена даже файлы вроде как не трогает на hdfs

сейчас не уверен =)
источник

MB

Mikhail Butalin in Data Engineers
Кстати вот что интересует
источник