Size: a a a

2019 June 25

GG

George Gaál in Data Engineers
если вас устраивает профигачить 5% данных и ничего за это не будет, то КХ - вариант
источник

GG

George Gaál in Data Engineers
/в аналитике именно такой кейс и есть, что потеря какого-то процента данных в целом не влияет на статистику в общем/
источник

СХ

Старый Хрыч in Data Engineers
Рамиль Ахмадеев
вот да, что с ним не так?
по хорошему сделали выборку на 50-60 тб, убили кластер и убили данные
источник

СХ

Старый Хрыч in Data Engineers
и заново
источник

СХ

Старый Хрыч in Data Engineers
чем больше вычислений тем хуже скорость
источник

S

Stanislav in Data Engineers
Старый Хрыч
чем больше вычислений тем хуже скорость
открытие америки про вычислительные системы )
источник

DM

Daniel Matveev in Data Engineers
Старый Хрыч
чем больше вычислений тем хуже скорость
бейджик "аналитика"
источник

AS

Andrey Smirnov in Data Engineers
Stanislav
открытие америки про вычислительные системы )
можно пойти еще дальше: чем больше данных, тем хуже скорость
источник

A

Alexander in Data Engineers
George Gaál
если вас устраивает профигачить 5% данных и ничего за это не будет, то КХ - вариант
А это как?
источник

СХ

Старый Хрыч in Data Engineers
Alexander
А это как?
а так, он простой как валенок, но проблема в том, что он не сделан для хранения данных, и поэтому легко их теряет
источник

СХ

Старый Хрыч in Data Engineers
портит
источник

A

Alexander in Data Engineers
Что значит теряет?
источник

A

Alexander in Data Engineers
Все ещё похоже на страшилку - не вспомню такого неконтролируемого кейса, любопытно
источник

СХ

Старый Хрыч in Data Engineers
ну зайдите в чатик кликхауса и посмотрите темы про неконсситемные данные
источник

СХ

Старый Хрыч in Data Engineers
или когда у людей спустя время данные пропадали
источник

A

Alexander in Data Engineers
И вcегда у этих людей есть причины не совсем связанные с кх
источник

AS

Andrey Smirnov in Data Engineers
Alexander
И вcегда у этих людей есть причины не совсем связанные с кх
как у классика: ложечки потом нашлись, но осадок остался
источник

A

Alexander in Data Engineers
Мы кх гоняем больше года в проде, мне действительно любопытно, есть ли конкретные кейсы, когда данные пропадают или портятся, без общих отсылок
источник

S

Stanislav in Data Engineers
Alexander
Мы кх гоняем больше года в проде, мне действительно любопытно, есть ли конкретные кейсы, когда данные пропадают или портятся, без общих отсылок
Конкретно про пропажу рассказывала Оля на ок.толкс из иви. Но там скорее негарантированная доставка данных - отправили батч, кх ответил ок, данных в базе нет
источник

A

Alexander in Data Engineers
Спасибо, посмотрю.
источник