а демку скинете в чат телеги?
#question

какие проблемы, если работать со спарком через питон через pySpark?
#question

Всё видно

Видно понятно

Сергей Р
Видно

Алексей Проскурнин
хорошо видно, красивые стрелочки перевода строки :-)

Был фильм 2012 на нем проверить можно

Эффект презентации)

отдайте демку в свободное плавание, мы настроим)
#question

Антон Блинов
а после ребута идеи был реинит?

Евгений Тимофеев
Тайтл в регулярке нормально распарсится как 1984 - там же регулярка только со скобками и в конце строки удаляетс

А головы говорящие можно уменьшить в трансляции, чтобы места для кода было побольше?

Евгений Тимофеев
А с точки зрения перфоманса разве не лучше сначала отфильтровать фильмы по >1930? Или я это где-то прропустил?

Максим Алексеев
вопрос к концу доклада - Spark сейчас это, как я понимаю, только движок для Compute. а как в 21/22 годах выглядит дизайн полного data warehouse с использованием спарка? из предположения что проектируем с нуля- нужен ли отдельный шедулер джобов (Airflow etc)- какой backing storage нынче модно брать для большого масштаба? HDFS, колоночные базы, что-то еще- чем все это мониторить- любые другие важные компоненты DWH

комедии и ужасы

Алексей Проскурнин
комедия

Такое ощущение, что по монитору кирпичом ударили

Экшен или драма

драматичный вывод

Мне кажется не совсем легитимная победа для Драмы. Драма это очень частый дополнительный жанр. Например мне кажется, что у комедий Чаплина тоже есть составляющая драмы