Size: a a a

2020 February 27

АЖ

Андрей Жуков in Data Engineers
Simon Osipov
Вот @krivdathetriewe, правда регистрация быстро закрылась
вчера была открыта
источник

SO

Simon Osipov in Data Engineers
Андрей Жуков
вчера была открыта
Видимо, были отказы
источник

I

I Апрельский in Data Engineers
Было 4 отказа от «билетов», поэтому удалось
источник
2020 February 28

AZ

Anton Zadorozhniy in Data Engineers
а потом докладчик сознается что он архитектор хранилищ. доклад оставил очень сумбурное впечатление
источник

SO

Simon Osipov in Data Engineers
Anton Zadorozhniy
а потом докладчик сознается что он архитектор хранилищ. доклад оставил очень сумбурное впечатление
Почему?
источник

N

Nikita Blagodarnyy in Data Engineers
Anton Zadorozhniy
а потом докладчик сознается что он архитектор хранилищ. доклад оставил очень сумбурное впечатление
Как будто это какой-то дефект :)
Бесспорно, мсье Козырь на отусе более полно и содержательно вещает. Мне кажется, основной топик все-таки осветили. Для начинающих много полезной инфы и ссылок/литературы.
источник

AZ

Anton Zadorozhniy in Data Engineers
Nikita Blagodarnyy
Как будто это какой-то дефект :)
Бесспорно, мсье Козырь на отусе более полно и содержательно вещает. Мне кажется, основной топик все-таки осветили. Для начинающих много полезной инфы и ссылок/литературы.
книжки хорошие рекомендовал, да
источник

N

Nikita Blagodarnyy in Data Engineers
Ещё какие-то волшебные курсы подготовки к облачной сертификации мелькали. Тоже выглядит полезным.
источник

AZ

Anton Zadorozhniy in Data Engineers
Simon Osipov
Почему?
кмк не очень понятно где конкретно место ижненера в процессе создания продукта, или сервиса, или платформы.. почему-то в ДЕ приходят из программистов, ДС и других отраслей, но ДЕ всегда были, просто до спарка они писали на SQL или SASе или на DSL поверх этого или в ETL тулах.. ETL разработчик где-то появился, но выходит что дата инженер становится ETL разработчиком?
источник

AZ

Anton Zadorozhniy in Data Engineers
вообще наверное я не очень внимательно слушал, просто нарратива не услышал
источник

AZ

Anton Zadorozhniy in Data Engineers
кмк ДЕ это не профессия, а специализация (которых у опытных инженеров обычно много) и роль в конкретной команде/проекте, как-то так
источник

SO

Simon Osipov in Data Engineers
Data Engineer это все тот же бородатый DBA, только со смузи, а все его базы в облаке..
источник

AZ

Anton Zadorozhniy in Data Engineers
с другой стороны что я знаю? я тоже архитектор хранилищ (в прошлом, все в прошлом :))
источник

SO

Simon Osipov in Data Engineers
😭
источник

AZ

Anton Zadorozhniy in Data Engineers
Simon Osipov
Data Engineer это все тот же бородатый DBA, только со смузи, а все его базы в облаке..
скорее ETL-щик, а DBA это теперь девопс (которых нет)
источник

AZ

Anton Zadorozhniy in Data Engineers
но вообще все молодцы и спасибо организаторам, второй доклад отличный, чем больше митапов тем лучше
источник

N

Nikolay in Data Engineers
Чем MinIO лучше ,чем hdfs?
источник

SS

Sergey Shushkov in Data Engineers
Не лучше, просто S3 совместимое апи. Проще в облако будет перенести если под авс стек разрабатываете а тестируете локально на минио
источник

SS

Sergey Shushkov in Data Engineers
Ну либо если хочетсо свое облачное хранилише но не хочеться hdfs по идеологическим соображениям. Но тут мне ceph и openstack больше нравиться
источник

A

Alex in Data Engineers
Nikolay
Чем MinIO лучше ,чем hdfs?
Чем хдфс :)

Но вообще у хдфс проблемы со скейлом неймноды на больших объемах

Viewfs и федерация на клиенте не само удобная

А сервер байзет федерация с роутерами только первую фазу стабилизации в будущем 3.3 прошла, текущая 3.2 совсем сырая
источник