Size: a a a

2021 May 24

AZ

Anton Zadorozhniy in Data Engineers
нет, я имею в виду что для аналитики нужно собирать данные из разных сервисов которые могут быть на разных клаудах
источник

AZ

Anton Zadorozhniy in Data Engineers
истории когда разные линии бизнеса используют разные клауды - это сплошь и рядом
источник

PK

Pavel Klemenkov in Data Engineers
Ну я про то же, наверное неправильно выразился
источник

AZ

Anton Zadorozhniy in Data Engineers
несколько раз я видел когда одни и теже данные дублируются в другой клауд и там бегут какие-то разовые кейсы, и есть возможность поднять компьют "если что"
источник

AZ

Anton Zadorozhniy in Data Engineers
для нашей балалайки DR иногда держат "в другом клауде" :)
источник

A

Alex in Data Engineers
спасибо! вот интересно оправдана ли стратегия малтиклауда со старта разработки.. или же вводить платформы-прослойки стоит только тогда, когда четко понимаешь зачем тебе это нужно? я вот реальных потребностей в этом у тех людей не понял.. все базируется на гипотетических домыслах у них
источник

AZ

Anton Zadorozhniy in Data Engineers
какие требования закрывает мультиклауд?
источник

A

Alex in Data Engineers
я не увидел у них четких требований.. просто не хотят зависеть и видимо наибольше их слово "зависеть" напрягает чем реальные проблемы
источник

AZ

Anton Zadorozhniy in Data Engineers
ну для инженера это идеальный вариант
источник

AZ

Anton Zadorozhniy in Data Engineers
если у заказчика есть необоснованный страх и он готов платить за это
источник

A

Alex in Data Engineers
согласен, поэтому я никого не отговаривал там
источник

AZ

Anton Zadorozhniy in Data Engineers
ну как честный консультант я обычно пояснял людям что и как, но часто бывали бизнес-спонсоры без обоснованных причин
источник

D

Dmitry in Data Engineers
ну в принципе с датабриксом это в теории может прокатить. подготовить вариант B с опенсоурсным delta lake на хадупе, но в варианте A гонять все у датабрикса
источник

AZ

Anton Zadorozhniy in Data Engineers
надо смотреть на объемы, кейсы
источник

AZ

Anton Zadorozhniy in Data Engineers
я помню что тупо выгрузить из S3 петабайт данных стоит 50К долларов только за data transfer
источник

ME

Max Efremov in Data Engineers
можно снежком выгрузить, вроде
источник

ME

Max Efremov in Data Engineers
мб дешевле будет
источник

AZ

Anton Zadorozhniy in Data Engineers
так что мб поддерживать копию самых важных данных в других местах - не такая плохая мысль
источник

ME

Max Efremov in Data Engineers
$52к :)
источник

ME

Max Efremov in Data Engineers
22к это хранить это месяц в S3
источник