Size: a a a

2019 August 27

СХ

Старый Хрыч in Data Engineers
Andrey Smirnov
хз, s3 + emr для посчитать выйдет много дешевле.
не всё так просто, следить за состоянием и тд всё равно будут люди а не авс
источник

СХ

Старый Хрыч in Data Engineers
это как некоторые считают что rds мониторить и бэкапить ненужно
источник

AS

Andrey Smirnov in Data Engineers
Старый Хрыч
не всё так просто, следить за состоянием и тд всё равно будут люди а не авс
компания работает так уже не первый год, все хорошо, с "администрированием" справляется один человек
источник

GP

Grigory Pomadchin in Data Engineers
Polina Azarova
А чем так сильно Хортон хорош что все с него слезть не могут?
Никто не знает, в ваниле тяжело тар гз архивы распаковывать постоянно забываешь флаги -xzf
источник

СХ

Старый Хрыч in Data Engineers
Andrey Smirnov
компания работает так уже не первый год, все хорошо, с "администрированием" справляется один человек
ну он всё равно есть, а они хотят фулл с себя убрать администрирование
источник

СХ

Старый Хрыч in Data Engineers
Grigory Pomadchin
Никто не знает, в ваниле тяжело тар гз архивы распаковывать постоянно забываешь флаги -xzf
толсто
источник

GP

Grigory Pomadchin in Data Engineers
я пролистал честно все варианты ответов, и с распаковкой самый дельный; может конечно поддержку купить можно (хдп), но я сам бы хотел услышать чем не ванила хороша
источник

СХ

Старый Хрыч in Data Engineers
Grigory Pomadchin
я пролистал честно все варианты ответов, и с распаковкой самый дельный; может конечно поддержку купить можно (хдп), но я сам бы хотел услышать чем не ванила хороша
в ваниле ты должен написать всю установку, сам включать все компоненты, писать к ним везде конфиги и всё продумывать, а в том же hdp, ты просто в амбари далее далее далее, а потом уже нужное тюнишь по мере проблем
источник

СХ

Старый Хрыч in Data Engineers
плюс вокруг ванильки надо городить всё логирование самому в кибане
источник

СХ

Старый Хрыч in Data Engineers
а это тот ещё квест
источник

СХ

Старый Хрыч in Data Engineers
а самое главное время
источник

СХ

Старый Хрыч in Data Engineers
а руководство тебя наняло и через 2 дня ждёт рабочий кластер
источник

UD

Uncel Duk in Data Engineers
Старый Хрыч
в ваниле ты должен написать всю установку, сам включать все компоненты, писать к ним везде конфиги и всё продумывать, а в том же hdp, ты просто в амбари далее далее далее, а потом уже нужное тюнишь по мере проблем
Скрипты есть в бигтопе
источник

UD

Uncel Duk in Data Engineers
Проблема с бэкпортами в основном и фиксами
источник

GP

Grigory Pomadchin in Data Engineers
Старый Хрыч
в ваниле ты должен написать всю установку, сам включать все компоненты, писать к ним везде конфиги и всё продумывать, а в том же hdp, ты просто в амбари далее далее далее, а потом уже нужное тюнишь по мере проблем
для кластера не считается, установка это 1 - 2 хмлки править + для логов один аппендер ну такое
источник

GP

Grigory Pomadchin in Data Engineers
Что делать с апдкйтами? Ванила вся в топе а хдп где то в позади
источник

СХ

Старый Хрыч in Data Engineers
Grigory Pomadchin
для кластера не считается, установка это 1 - 2 хмлки править + для логов один аппендер ну такое
только у hbase 4 конфига же
источник

GP

Grigory Pomadchin in Data Engineers
раньше ещё у них свои были зависимости для улиентских либ
источник

GP

Grigory Pomadchin in Data Engineers
Старый Хрыч
только у hbase 4 конфига же
О ты уже хбейз добавил
источник

GP

Grigory Pomadchin in Data Engineers
мыж тока про хдфс + ярн говорили
источник