DM
А то что оно не инмемори это ок?
аэроспайк тоже не обязан быть инмемори
Size: a a a
2019 July 23
АЖ
аэроспайк тоже не обязан быть инмемори
Ну там наркоманский перзист
DY
А то что оно не инмемори это ок?
оно инмемори тоже
DY
А где датасеты брать?
там в основном генерируется популяция через cassandra-stress
DM
Ну там наркоманский перзист
в чем наркомаания?
АЖ
в чем наркомаания?
Неразмеченный ссд под это тратить :)
DM
необязательно и непонятно в чем проблема
АЖ
необязательно и непонятно в чем проблема
Это не проблема, это специфический способ развертывания, рекомендуемый вендором :) чуть сложнее масштабируемый в облаке.
DM
ну это если вам нужно выжимать еще больше перформанса
DM
а так берите стандартные фс и вперед
N
Граждане-одмены, подскажите, в какую сторону смотреть. Половина служб в амбари с красными критическими алертами, ошибка везде одна и та же, connection refused to <random_node>:<random_port>
N
Какой-то системы я не обнаружил в тех нодах, которые указаны в ошибке
N
В логах службы на ноде, указанной как проблемная, чисто, одни инфо
N
Обычно ошибок 1-2, и они рассасываются со временем. Но тут что-то пошло не так
K
Вопрос в том какое kv выбрать с которым спарк быстрее будет джоинить или туда выгружать для джоина если быстрее будет)
Возьмите кассандру , у ее есть удобный докер образ развернуть
OP
Возьмите кассандру , у ее есть удобный докер образ развернуть
Ограничение в 1 Гб на inmemory вроде. А реален ли вариант все директории с хранимыми данными в рам выгрузить, чтоб из чего угодно сделать инмемори ?)
DY
у меня не было прироста производительности
опиши нагрузки
S
Граждане-одмены, подскажите, в какую сторону смотреть. Половина служб в амбари с красными критическими алертами, ошибка везде одна и та же, connection refused to <random_node>:<random_port>
Ну а сами службы то живые?
N
Ну а сами службы то живые?
Не очень понятно, потому что ярн, например, логи не пишет. Hive запросы выполняются, а вот slider не сабмитится
2019 July 24
t
че обсуждать - все знают, что есть две идеальные технологии - спарк и кассандра