Size: a a a

2021 March 01

AS

Andrey Smirnov in Data Engineers
Ya Anna
1. Какие предложения о сотрудничестве ( в каком ключе) вы бы НЕ хотели получать?
2. И Обратный вопрос: как заинтересовать специалиста области ит? как именно рекрутер ( по вашему) должен составить сопроводительное, чтобы вас оно заинтересовало?
3. Могу ли я ознакомиться с вашими резюме, а именно с резюме Data Engineer' ов и пайтон разработчиков ? На хх.ру почти никого нет, на фейсбуке тематические группки закрыты, остается надежда на чатики, типа этого. К сожалению, сколько не учись, без наглядного примера ( как и где вообще взять резюме ит'шников) толку особо не будет.
Заранее спасибо!
Для меня норм следующее:
1. Спросить не ищу ли я сейчас работу, и что есть предложение работу работать в компании рога и копыта (вот только без описания всякой инновационности и т.д.) на такую-то вилку по деньгам
2. деньги и задачи (условно я здесь из одной очереди перекладываю в другую, что еще может меня заинтересовать, релокейт в Пермь не предлагать)
3. а что вы хотите в резюме почерпнуть такого сакрального?
источник

Y

Ya Anna in Data Engineers
это, кстати, отличная идея! А вы получали предложения с такими докладами?
источник

Y

Ya Anna in Data Engineers
Мне бы в целом хотелось посмотреть на адекватное резюме дата инженеров. Сколько я их уже видела, они либо на " отстань" заполнены. Типа " звоните и спрашивайте чо надо, я скажу умею или нет". Это по коммуникации очень долго. На линкедине реально много резюме, но у меня на данный момент проблемка с впн и я не могу туда попасть(
источник

NN

No Name in Data Engineers
Ya Anna
Мне бы в целом хотелось посмотреть на адекватное резюме дата инженеров. Сколько я их уже видела, они либо на " отстань" заполнены. Типа " звоните и спрашивайте чо надо, я скажу умею или нет". Это по коммуникации очень долго. На линкедине реально много резюме, но у меня на данный момент проблемка с впн и я не могу туда попасть(
Я не понимаю, что Вам даст резюме.
источник

ME

Max Efremov in Data Engineers
No Name
Я не понимаю, что Вам даст резюме.
Баззворды)
источник

DZ

Dmitry Zuev in Data Engineers
Дяди, стыдно такое спрашивать но всё же:
Мы скопировали данные из одного hive warehouse, в другой. Теперь нам надо перенести ддл.
Можно ли тупо делать CREATE TABLE если данные уже лежат, их не удалит?
Если нет, то как проще всего мигрировать мету?
источник

A

Alex in Data Engineers
если external table то должно быть норм
а вот если managed то по идее тебе ругнётся в этот момент что пути уже существуют
источник

NN

No Name in Data Engineers
Dmitry Zuev
Дяди, стыдно такое спрашивать но всё же:
Мы скопировали данные из одного hive warehouse, в другой. Теперь нам надо перенести ддл.
Можно ли тупо делать CREATE TABLE если данные уже лежат, их не удалит?
Если нет, то как проще всего мигрировать мету?
А мета у хайва же где-то в постгре лежит? Не получится для managed грубо руками перетащить?
источник

A

Alex in Data Engineers
я бы посмотрел на это порно =)
источник

DZ

Dmitry Zuev in Data Engineers
No Name
А мета у хайва же где-то в постгре лежит? Не получится для managed грубо руками перетащить?
Один из вариантов, но там разные версии хайва, плюс это точно не самый простой способ
источник

DZ

Dmitry Zuev in Data Engineers
Alex
если external table то должно быть норм
а вот если managed то по идее тебе ругнётся в этот момент что пути уже существуют
ну вот там managed
источник

A

Alex in Data Engineers
Dmitry Zuev
Один из вариантов, но там разные версии хайва, плюс это точно не самый простой способ
тогда я предпочту запись, чтобы пересматривать
но на ютубе это точно запретят =)
источник

DZ

Dmitry Zuev in Data Engineers
источник

DZ

Dmitry Zuev in Data Engineers
а если вперед накатить ddl а потом данные?
источник

A

Alex in Data Engineers
вот это может прокатить, так как список файлов насколько помню не хранится в базе, только метаданные и статистика
источник

A

Alex in Data Engineers
НО я не уверен как это для acid таблиц с орками, где они дельтами дописывают данные
источник

DZ

Dmitry Zuev in Data Engineers
такого у нас нет
источник

А

Алексей in Data Engineers
нужно будет выполнить MSCK REPAIR TABLE , чтобы файлы подхватились
источник

UR

Uncle Ruckus in Data Engineers
Dmitry Zuev
Дяди, стыдно такое спрашивать но всё же:
Мы скопировали данные из одного hive warehouse, в другой. Теперь нам надо перенести ддл.
Можно ли тупо делать CREATE TABLE если данные уже лежат, их не удалит?
Если нет, то как проще всего мигрировать мету?
Эх, молодежь... Нет чтобы пошаманить в БД репозитория
источник

DZ

Dmitry Zuev in Data Engineers
шта?
источник