E
Весь хадуп это какаха :) а мы в этом всем сантехники
Ассенизаторы
Не, это если ты админишь,
А если пайплайны делаешь, то сантехник, трубы чинишь
Size: a a a
2019 July 08
A
ДД
Возвращаясь к моим баранам :) кто-нибудь знает как можно конфиг HBase в базе Zookeeper изменить/удалить?
Просто ощущение, что именно зукипер подсовывает старое имя хоста
Просто ощущение, что именно зукипер подсовывает старое имя хоста
S
Возвращаясь к моим баранам :) кто-нибудь знает как можно конфиг HBase в базе Zookeeper изменить/удалить?
Просто ощущение, что именно зукипер подсовывает старое имя хоста
Просто ощущение, что именно зукипер подсовывает старое имя хоста
rmr /hbase-unsecure
EN
@xhumanoid подскажи пожалуйста, а shc ты вообще используешь при работе с hbase? Или например hbase4s, если не секрет?
A
Нет, я обычно с чистой java ходил, серверные приложения, без спарков
На последнем месте у нас был спарк с hbase, но там тоже без этого обходились, так как ещё с rdd работали для процессинга
На последнем месте у нас был спарк с hbase, но там тоже без этого обходились, так как ещё с rdd работали для процессинга
EN
Ок, спасибо!)
S
Возвращаясь к моим баранам :) кто-нибудь знает как можно конфиг HBase в базе Zookeeper изменить/удалить?
Просто ощущение, что именно зукипер подсовывает старое имя хоста
Просто ощущение, что именно зукипер подсовывает старое имя хоста
Вот только эта шалабушка по умолчанию в хдп не использует чбейз сервис, а поднимает внутренний инстанс, насколько я помню. Как ихний мониторинг
ДД
Вот только эта шалабушка по умолчанию в хдп не использует чбейз сервис, а поднимает внутренний инстанс, насколько я помню. Как ихний мониторинг
Да, она свой HBase поднимает, как отдельного сервиса его я не ставил
AS
@xhumanoid подскажи пожалуйста, а shc ты вообще используешь при работе с hbase? Или например hbase4s, если не секрет?
Мы использовали в спарке shc (была написана обертка над ним)
a
Кто что использует для деплоя схемы HBase? Что-нибудь в духе liquibase?
AZ
Кто что использует для деплоя схемы HBase? Что-нибудь в духе liquibase?
Просто скрипт на груви, там «схема» же громкое слово: список CF и конфигурации
2019 July 09
VS
@xhumanoid подскажи пожалуйста, а shc ты вообще используешь при работе с hbase? Или например hbase4s, если не секрет?
Shc-core ? Мы используем...
a
Просто скрипт на груви, там «схема» же громкое слово: список CF и конфигурации
Ну да. А потом добавление cf. А потом изменение конфигураций. Сделать-то не очень сложно, но вдруг этот велосипед уже кто-то изобрел?
N
Привет. Ткните пожалуйста носиком. На датанодах стейджинга начало исчерпываться 80% места на дисках. Есть какой-то параметр, как на ярне, чтобы отодвинуть это порог? я амбари обшарила и не нашла.
N
и в доке не нашла 😕
E
Rm skiptrash?
N
эмм, всё что можно было удалить, я уже удалила )
EN
Данные нормально распределены ? 80% по кластеру?
N
да, уже на всех подползает к 80, но практически оставшиеся 20% это еще несколько терабайт на каждой ноде 🙈