D
пример чего хотите узнать тогда
Size: a a a
2021 October 05
AP
Ну к примеру вы обсуждаете разделение “витрины” и хранилища. Применение распределенной обработки (спарка) на террабайтных данных. Я не понимаю почему, ведь несколько террабайт легко влезают на один сервак, и можно использовать локальное решение и т.п.
AZ
Терабайт (с одной р) это правда небольшой объём по нынешним временам, телефон у моей жены имеет столько памяти
D
😑 серьезно?
D
телефон жены имеет терабайт? что это за устройство такое
ЕГ
Ифон новый, а может и другие флагманы тоже
ЕГ
Флешкой на терабайт после появления ssd больше никого не удивить)
ИК
Вот на телефоне и надо бигдату запускать. У него и связь есть с другими хД
NN
Обычно у нас в такие моменты сразу же говорят, что для такого объема может хватить и постгри, например.
D
csv
D
гонять ещё постгрю
AP
Ну ок, что бы вы посоветовали человеку, который хочет въехать в домен?
ЕГ
Мощнее компов нынче)
AP
Т.е. типичные архитектуры, типичные проблемы и т.п.
D
кажется вам просто практика нужна/опыт, я уже даже не помню как начал разделять хранилище витрины и тд... своркее всего в процессе работы
ЕГ
Мы применяем спарк в любой непонятной ситуации, и в понятной тоже, потому что а почему бы и нет)
ИК
Сорс ревью, конференции, пейперы по реализациям хранилищ и БД
D
я в любой непонятной юзаю кликхаус)
D
о я кстати знаю что вам можно глянуть
ИК
А у меня выбора нет. Понятно или нет - спарк!!