Size: a a a

2019 June 28

A

Alex in Data Engineers
George Gaál
катастрофически
ну и в друиде большинство нод будет read only, поэтому терять их проще
а с гоможенностью большой вопрос когда ты сразу якобы делаешь всё
источник

СХ

Старый Хрыч in Data Engineers
Alex
ну и в друиде большинство нод будет read only, поэтому терять их проще
а с гоможенностью большой вопрос когда ты сразу якобы делаешь всё
там вопрос не только в гомогенности, а ещё в том что кх по сути клал болт на данные
источник

СХ

Старый Хрыч in Data Engineers
и чем больше у тебя нод тем выше шанс не иметь данных
источник

VS

Vladislav 👻 Shishkov in Data Engineers
Не клал болт, а просто факт вставки не коррелирует с ответом 200 OK
источник

GG

George Gaál in Data Engineers
ну, друид будто гарантирует консистентность
источник

A

Alex in Data Engineers
Старый Хрыч
там вопрос не только в гомогенности, а ещё в том что кх по сути клал болт на данные
я знаю, плюс кликхаус расширение кластера это вагон ручных правок xml по всему кластеру
в друиде докинуть historical нод с правильным параметром запуска

но это всё уже совсем другая песня, относящаяся больше к TCO
источник

A

Alex in Data Engineers
George Gaál
ну, друид будто гарантирует консистентность
да
источник

СХ

Старый Хрыч in Data Engineers
Alex
я знаю, плюс кликхаус расширение кластера это вагон ручных правок xml по всему кластеру
в друиде докинуть historical нод с правильным параметром запуска

но это всё уже совсем другая песня, относящаяся больше к TCO
захрена? там как и в кафке для этого зукипер
источник

GG

George Gaál in Data Engineers
мне кажется, что вопрос консистентности в распределенных системах... кх.... боль
источник

GG

George Gaál in Data Engineers
Старый Хрыч
захрена? там как и в кафке для этого зукипер
ну, там нужно параметры репликации в хмл, насколько я помню.
источник

A

Alex in Data Engineers
индексер делает имьютабл сегмент
вставляет в дипсторейдж
после этого уходит инфа что такой-то сегмент отвечает за такие-то диапазоны
дальше сегменты на хисторикал вычитываются и только читаются, без каких либо изменений
комит в кафку что сегмент закончен


ну и по кругу
источник

A

Alex in Data Engineers
если сам отдельно индексируешь то похожий подход:
закинул сегмент в дип сторейдж
пронотифицировал координатор
хисторикал вытянули и сервают его
источник

A

Alex in Data Engineers
нету апдейтов - нету неконсистентности
источник

A

Alex in Data Engineers
в общем ничего не имею против кликхауса, но реальность в том что он популярен только на постсоветском пространстве
источник

N

Nikolay in Data Engineers
Ну понятно почему он к нас популярен. На западе ,наверное , с осторожностью относятся к русским продуктам .боятся хакеров )
источник

СХ

Старый Хрыч in Data Engineers
George Gaál
ну, там нужно параметры репликации в хмл, насколько я помню.
так тоже через зукипер можно, правда потом лучше кластер не выключать
источник

GG

George Gaál in Data Engineers
Nikolay
Ну понятно почему он к нас популярен. На западе ,наверное , с осторожностью относятся к русским продуктам .боятся хакеров )
ну, КХ же опенсурс
источник

СХ

Старый Хрыч in Data Engineers
George Gaál
ну, КХ же опенсурс
только хреновый
источник

N

Nikolay in Data Engineers
В чем хреновость ?
источник

A

Alex in Data Engineers
Старый Хрыч
только хреновый
Почему хреновый?

1 Просто его открыли заметно позже чем друид, тот в проде уже был давно у многих в момент когда кх только показали

2 По первости все коменты и документация были только на русском, что отпугивало иностранные компании, сейчас вроде это уже исправили
источник