RZ
переезд будет осенью, а ошибки хочется сейчас видеть в графане
Я когда то настраивал https://spark.apache.org/docs/1.0.2/monitoring.html, но это было давно; скидывал в графит вроде и дальше кидал... но сейчас уже деталей не помню
Size: a a a
2021 January 29
СХ
спасибо, тут такое всё пока древнее....
ПФ
Чатик, что порекомендуете для тестирования пайплайнов? Хочу тестировать шире чем Спарк.
СХ
Чатик, что порекомендуете для тестирования пайплайнов? Хочу тестировать шире чем Спарк.
😂лучше бы кнопочку в бигдата тулс сделали под кафку, чтобы выводила в буфер размер всех топиков, кол-во партиций в топике, сколько в какакой партиции записано, кто создавал, когда последний раз из неё читали писали😂 а то уже пол дня думаю сколько костылей в скрипте будет
ПФ
😂лучше бы кнопочку в бигдата тулс сделали под кафку, чтобы выводила в буфер размер всех топиков, кол-во партиций в топике, сколько в какакой партиции записано, кто создавал, когда последний раз из неё читали писали😂 а то уже пол дня думаю сколько костылей в скрипте будет
Поддержка Кафки сейчас первая большая фича в очереди
СХ
https://plugins.jetbrains.com/plugin/11946-kafkalytic я вот такой плагин смотрел, но когда у тебя 600+ топиков и у каждого по 30-80 партиций - толку от него мало
AZ
😂лучше бы кнопочку в бигдата тулс сделали под кафку, чтобы выводила в буфер размер всех топиков, кол-во партиций в топике, сколько в какакой партиции записано, кто создавал, когда последний раз из неё читали писали😂 а то уже пол дня думаю сколько костылей в скрипте будет
если не секрет, зачем вам это в IDE?
СХ
если не секрет, зачем вам это в IDE?
😐заходить на сервер и вызывать скрипт надоело
СХ
разработчик пишет - у меня плохо работает кафка, потом оказывается что из 30 партиций он пишет в 1
СХ
😐а у тебя кафка с 15 кафка логс директориями на разных дисках на нодах
S
😐заходить на сервер и вызывать скрипт надоело
Сделайте себе вебморду со всем необходимым. Там и смотрите чо)
СХ
Сделайте себе вебморду со всем необходимым. Там и смотрите чо)
😂ты оплатишь её создание?
СХ
тыж не забывай, что хотят на тебя этот гемор переложить
S
😂ты оплатишь её создание?
А у меня она есть хD
СХ
А у меня она есть хD
😐кафка менеджер хрень
AZ
😐заходить на сервер и вызывать скрипт надоело
для этого же есть метрики, инвентарные сервисы со всеми метаданными
S
😐кафка менеджер хрень
Не. У нас своё решение написано.
TT
Не. У нас своё решение написано.
👍
PK
😂лучше бы кнопочку в бигдата тулс сделали под кафку, чтобы выводила в буфер размер всех топиков, кол-во партиций в топике, сколько в какакой партиции записано, кто создавал, когда последний раз из неё читали писали😂 а то уже пол дня думаю сколько костылей в скрипте будет
++++++++
DZ
😂ты оплатишь её создание?
Там сложность чуть больше чем у твоего скрипта