Size: a a a

2021 May 24

ME

Max Efremov in Data Engineers
ну т.е. одного порядка цена, не что-то космическое
источник

AZ

Anton Zadorozhniy in Data Engineers
50К, да
источник

AS

Andrey Smirnov in Data Engineers
источник

AZ

Anton Zadorozhniy in Data Engineers
мы считали с компьютом чтобы выгрузить быстрее, выходило около полумиллиона за ПБ
источник

AZ

Anton Zadorozhniy in Data Engineers
дороже, retrieval же возможен только в S3, потом нужно из S3 куда-то забрать
источник

ME

Max Efremov in Data Engineers
Что прям срочно надо, в glacier пихать не надо
источник

D

Dmitry in Data Engineers
да ладно. чем это надо выгружать что 500к сжечь
источник

ME

Max Efremov in Data Engineers
Туда только что нужно будет оооочень маловероятно, но выкинуть жалко
источник

AS

Andrey Smirnov in Data Engineers
Data transfer out from S3 Glacier to EC2 in the same region is FREE.
можно машинку поднять
источник

AZ

Anton Zadorozhniy in Data Engineers
но трафик потом за пределы AWS стоит сколько?
источник

AS

Andrey Smirnov in Data Engineers
а, ну если совсем вовне тогда да, ой
источник

AZ

Anton Zadorozhniy in Data Engineers
Azure Data Factory, задача слить за 48 часов
источник

AZ

Anton Zadorozhniy in Data Engineers
еще есть цена Direct Connect / Express Route которые не дешевые
источник

SS

Sergey Sheremeta in Data Engineers
коллеги, кто работает с Databricks, подскажите - можно ли как-то обратиться из Spark-задания к содержимому в Workspace?
источник

PK

Pavel Klemenkov in Data Engineers
Хочешь подгружать либы какие-то?
источник

SS

Sergey Sheremeta in Data Engineers
нет, нужно прогонять бенчмарк-тесты с помощью различных SQL-запросов. гораздо проще править их в интерфейсе Databricks нежели в S3
источник

K

KrivdaTheTriewe in Data Engineers
Видите , Клауд оч дорого на объемах в ПБ )
источник

ME

Max Efremov in Data Engineers
Можно комбинировать онпрем и клауд, вроде это может дать некоторую гибкость
источник

AZ

Anton Zadorozhniy in Data Engineers
Да, все знают что перегон ПБ между двумя датацентрами он-прем занимает меньше двух суток и делается почти бесплатно)
источник

AZ

Anton Zadorozhniy in Data Engineers
Есть риск получить цену клауда с эластичностью он-према
источник