Size: a a a

2021 May 03

T

T in Data Engineers
Я бы к этому серьезно не относился, это больше маркетинговый текст
источник

T

T in Data Engineers
И ещё, есть деньги платить за поддержку?
источник

T

T in Data Engineers
На EMR можно кстати и то и то из коробки погонять
источник

GP

Grigory Pomadchin in Data Engineers
прост форе я думаю что для броадер коммунити значит что они хотят решения по развитию проекта сделать коммунити дривен
источник

T

T in Data Engineers
Я в прошлом году много общался с чувакам из старбаста так как мы достаточно крупные клиенты у них были. Выглядит так что им слава бриксов не даёт покоя. И они хотят трино активно продавать
источник

ДН

Дмитрий Негреев... in Data Engineers
Пока вообще просто изучаю инструменты) сейчас есть только mpp, но вдруг для чего-то некритичного но большого не захочется за лицензии платить, и надо будет на какой-то sql engine посмотреть.
Фокусируюсь на то что уже есть в компании s3 и k8s, поэтому hadoop не хочется)
источник

GP

Grigory Pomadchin in Data Engineers
Ну трино да
источник

ДН

Дмитрий Негреев... in Data Engineers
Смотря сколько, если ценник кусается, проще вертику докупить тогда
источник

T

T in Data Engineers
Для таких целей разницы между ними нет
источник

T

T in Data Engineers
Если вы на Aws можете посчитать. Там старбаст кластер можно из маркетплэйса поднять. У нас был на спотах с авто скэлингом. Выходило для наших целей дёшево. Порядка 7к евро в месяц вроде
источник

ДН

Дмитрий Негреев... in Data Engineers
Только он-премис, доступа в облака нет
источник

AZ

Anton Zadorozhniy in Data Engineers
если данные уже на S3 то почему не Athena?
источник

ДН

Дмитрий Негреев... in Data Engineers
Прошу прощения, надо было уточнить, s3 like (minio)
источник

AZ

Anton Zadorozhniy in Data Engineers
я сам не до конца дочитал, понятно
источник

AZ

Anton Zadorozhniy in Data Engineers
если вы выбираете что взять, вертику или старберст - наверное задача поставлена не очень точно, это сильно разные компоненты с разными областями применения
источник

ЕГ

Евгений Глотов... in Data Engineers
Сколько же в бигдате разных непересекающихся областей применения...я вот лично видел только одну - попытаться заработать/сэкономить миллиард денег, не потратив при этом больше)
источник

ЕГ

Евгений Глотов... in Data Engineers
[если это не кор бизнес, который всё равно на оракле😆]
источник

NN

No Name in Data Engineers
Ну это обычно универсальная цель с точки зрения бизнеса, а вот технических юзкейсов действительно необычно много.)
источник

AZ

Anton Zadorozhniy in Data Engineers
я знаю что вертику сильно теснит кликхаус, в тех решениях где чистый витринный дашбординг и нет сложных запросов, но с престо у вертики сильно разные ниши, престо обычно на сильно больших объемах, много ад-хока и ожидание не такие большие
источник

ПБ

Повелитель Бури... in Data Engineers
Я пока так и не понял престо. У нас связка спарк+кх.
источник