Size: a a a

2017 January 27

NK

ID:1373407 in Data Engineers
Grigory Pomadchin
а как у вас разворачивается?
у нас зоопарк
источник

NK

ID:1373407 in Data Engineers
вообще
источник

NK

ID:1373407 in Data Engineers
кучу версий спарка в паралель
источник

NK

ID:1373407 in Data Engineers
одна джоба на одной версии,другая на другой
источник

GP

Grigory Pomadchin in Data Engineers
у меня (полу) готовое решение докером
источник

NK

ID:1373407 in Data Engineers
а что там за половина?
источник

NK

ID:1373407 in Data Engineers
мы генерируем шелл скрипты для каждой джобы, и шельник  запускаем оззи
источник

GP

Grigory Pomadchin in Data Engineers
https://github.com/geotrellis/geodocker-cluster

ну и отрефактореная версия (я только уже следил за рефакторингом):

https://github.com/geodocker/geodocker
источник

GP

Grigory Pomadchin in Data Engineers
ну я не про токак джобы запускюатся а про то как окружение обновляется и стартует?
источник

NK

ID:1373407 in Data Engineers
амбари  есть и паппет
источник

GP

Grigory Pomadchin in Data Engineers
а мне амбари показался не очень нужным оверхедом
источник

GP

Grigory Pomadchin in Data Engineers
вдруг те нужен кастомный билд спарка или хадупа; там все удобно будет?
источник

NK

ID:1373407 in Data Engineers
не будет удобно
источник

NK

ID:1373407 in Data Engineers
Амбари вообще, штука хорошая
источник
2017 February 06

p

ptchol in Data Engineers
Всем привет.
источник

p

ptchol in Data Engineers
по каким причинам у hbase может быть data locality 36% всего после major compaction ?
источник

GP

Grigory Pomadchin in Data Engineers
сплит по причине превышения максайза у регинов?
источник

GP

Grigory Pomadchin in Data Engineers
источник
2017 February 07

GP

Grigory Pomadchin in Data Engineers
ТЕРЯЕМ ЛЮДЕЙ
источник

NK

ID:1373407 in Data Engineers
Grigory Pomadchin
ТЕРЯЕМ ЛЮДЕЙ
профессия датаинженера не в почёте
источник