Size: a a a

2021 June 08

AZ

Anton Zadorozhniy in Data Engineers
Я знаю людей из MRL у которых какой-то очень cutting edge сторадж от vastdata, но сам там не работал
источник

UD

Uncel Duk in Data Engineers
че угодно кроме минио
источник

UD

Uncel Duk in Data Engineers
Если у вас много бармитола, можете озон потыкать
источник

AZ

Anton Zadorozhniy in Data Engineers
Посмотрел на список заказчиков vastdata - да, там в основном лаборатории и всякий research (и Raytheon :))
источник

A

Alex in Data Engineers
просто у нас сейчас как-то так
в итоге когда мне сказали что рассматривают его как замену хдфс (не нужно возиться с федерейшеном и тд)
то я немного растерялся

Configured Capacity: 34.22 PB
DFS Used: 27.63 PB
источник

A

Alex in Data Engineers
может выйти в пару крыльев боинга
источник

UD

Uncel Duk in Data Engineers
из смешного, ну можно цеф посмотреть
источник

UD

Uncel Duk in Data Engineers
s3 select там костылями начали завозить
источник

A

Alex in Data Engineers
у нас девопсы как-то совсем ceph готовят странно =\
поэтому его даже толком и не рассматриваем
источник

UD

Uncel Duk in Data Engineers
Либо очень сильно торговаться с сейлами всяких облаков и проприетарщиков
источник

AZ

Anton Zadorozhniy in Data Engineers
AWS Outpost, зачем все эти копии)
источник

UD

Uncel Duk in Data Engineers
так чисто в лоб, у линка кластерок на 500пб
источник

UD

Uncel Duk in Data Engineers
источник

A

Alex in Data Engineers
да уже смотрели эту статью
там у них много своих допилов в хадуп, у нас столько инженеров нету
источник

UD

Uncel Duk in Data Engineers
tl;dr считайте бюджеты, только не минио
источник

AZ

Anton Zadorozhniy in Data Engineers
Ещё можно критически подойти к data governance ;)
источник

UD

Uncel Duk in Data Engineers
Ну или если станок печатный жмет карман, можно какой-нибудь gpfs он же spectrum scale
источник

AZ

Anton Zadorozhniy in Data Engineers
Был вчера на звонке с бывшим клиентом который из трёх петабайт удалил два и все оказалось нормально)
источник

UD

Uncel Duk in Data Engineers
или таки сжать свою бигдату
источник

A

Alex in Data Engineers
да, у нас тоже много чего можно почистить =) и чистится периодически когда место заканчивается
источник