N
Могу ошибаться, но вроде что-то похожее лечилось тюнингом
spark.shuffle.registration.timeoutSize: a a a
2019 September 23
Ж
Можно ли мержить две таблицы в hbase или клонировать из снэпшота в уже существующую таблицу? В случае если column family только одна в каждой таблице?
RI
Могу ошибаться, но вроде что-то похожее лечилось тюнингом
spark.shuffle.registration.timeoutСпс, посмотрю
RI
Жмака
Можно ли мержить две таблицы в hbase или клонировать из снэпшота в уже существующую таблицу? В случае если column family только одна в каждой таблице?
Хм.. Hbase это kv, как я понимаю ему все равно. Просто при совпадение ключей он все перепишет.
Ж
Хм.. Hbase это kv, как я понимаю ему все равно. Просто при совпадение ключей он все перепишет.
Переписать нельзя. Мне интересно что будет если ключ будет в двух таблицах одинаковым? Создастся новая версия строки?
RI
Жмака
Переписать нельзя. Мне интересно что будет если ключ будет в двух таблицах одинаковым? Создастся новая версия строки?
Я занимался переписыванием значений в таблице. Если ключ одинаковый, то одинаковые колонки перепишутся.
AP
Жмака
Переписать нельзя. Мне интересно что будет если ключ будет в двух таблицах одинаковым? Создастся новая версия строки?
Ну начнем с того, включена ли версионность для конкретной CF.
Ж
Версионность по дифолту 3 версии
AP
Жмака
Версионность по дифолту 3 версии
"Prior to HBase 0.96, the default number of versions kept was 3, but in 0.96 and newer has been changed to 1", но не известно, какая у тебя версия.
Ж
Еще хуже🤦🏻♂️🙂
Ж
У меня несколько кластеров: 1.2, 1.4, 2.1
MR
А кто-нибудь читал Hadoop in action? Имеет смысл для погружения?
SO
А кто-нибудь читал Hadoop in action? Имеет смысл для погружения?
Да
S
Жмака
Можно ли мержить две таблицы в hbase или клонировать из снэпшота в уже существующую таблицу? В случае если column family только одна в каждой таблице?
S
Union
Ж
Проблема если в двух таблицах разные column family. Написано, что должны быть одинаковые
S
families comma-separated list of families to copy To copy from cf1 to cf2, give sourceCfName:destCfName. To keep the same name, just give "cfName" all.cells also copy delete markers and deleted cells
2019 September 24
Вл
дратути
Вл
крч у меня вопрос не про кафку там спарк. а про computer vision и хз правильно ли я зашел
SU
Ребят, всем привет. Можете подсказать какое направление выбрать для магистратуры, чтоб стать тру дата инженером?