На версии 2.3 это точно работает с гемором, лучше прям на sql написать insert overwrite table select * from tmp_df

А то можно и дубли получить, и старые партиции потерять

Всем привет!
В DataJobs никто не отвечает, поэтому никто ли не против если я опубликую здесь?

#вакансия #преподавание #spark

Всем привет! ФПМИ МФТИ снова ищет преподавателя и на этот раз по Spark.

- 2 лекции 10.03 и 17.03 в Зуме. Студенты уже знакомы с mapreduce, hive, и некоторые немного уже знают Spark. Нужно дать людям понимание как спарк устроен в плане архитектуры и почему он так хорош, какие бывают оптимизации. Кодить не нужно, у нас есть семинары и отдельный семинарист. Примеры кода лучше показывать на питоне чем на Scala / Java (c этими языками студенты меньше знакомы).
- помимо лекций:
 1) помощь в составлении теста (~5 вопросов с выбором вариантов ответа)
 2) ответы на вопросы студентов в чате по материалам лекции (обычно вопросов мало, но они интересные)
 3) поделиться доп. материалами со студентами.

Оплата за всё 24К чистыми.

я ещё в фид отправил, не знаю на скок здесь место вакансиям)

Но вроде такая это достойная внимания) образование

Спасибо! А тебе самому не интересно? Когда-то кажется, тебя Дима рекомендовал

Единственное, что нам уклон в питон надо

питон питон питон..

Согласен вцелом... Но у нас далеко не все шарят Java. Поэтому Java можно, но ~30%, а не всё

дистанционно возможно?

Да.

Только так и возможно)

См. вакансию

3) поделиться доп. материалами

обязательно включть ссылку на этот чат в доп. материалы

А я и так на всех курсах делюсь этим чатом

я б читанул, но вот 10го совсем никак

напиши когда можешь, посмотрим

👍👍

@krivdathetriewe читани, ты ж в вышке читал