K
У ё😞 А вот эту не увидел. Может ты и прав и всё не так плохо. Пойду попробую
там много разных функций, но если сложно аггрегацию можно в rdd делать сложную
Size: a a a
2019 August 06
ПФ
там много разных функций, но если сложно аггрегацию можно в rdd делать сложную
Ну не, есть новое модное апи
A
там много разных функций, но если сложно аггрегацию можно в rdd делать сложную
а как же всё движение к все большему deprecate для rdd ?
GP
https://twitter.com/asm0di0/status/1158637959119278081
quill намного удобнее чем frameless и работает лучше. Но вс равно не работет 😊
quill намного удобнее чем frameless и работает лучше. Но вс равно не работет 😊
нет, квилл кажется лучше, только когда ты первый раз его используешь; он не проверяет все типы в компайл тайме; датасеты и детефреймы ванильные тож
GP
а как же всё движение к все большему deprecate для rdd ?
Нету такого, как минимум пока
GP
А датасеты по факту просто ничем не отличаются от датафреймов
какое меткое замечание, что type Dataframe = Dataset[Row]
ПФ
какое меткое замечание, что type Dataframe = Dataset[Row]
Я знаю :)
ПФ
нет, квилл кажется лучше, только когда ты первый раз его используешь; он не проверяет все типы в компайл тайме; датасеты и детефреймы ванильные тож
Ну он проверяет типы по кейсклассам, это в принципе тоже неплохо и достаточно для большинства случаев
ПФ
Но он не работает для сложных штук, так что это неважно
ПФ
Два последних ишшу в гитхабе - это шоустопперы
GP
Но он не работает для сложных штук, так что это неважно
это важно; ты задал хороший вопрос - можешь спросить его в скала ру чатике, тебе пояснят за квилл
ПФ
Да да)))
GP
Ну он проверяет типы по кейсклассам, это в принципе тоже неплохо и достаточно для большинства случаев
нет, это гавно
GP
Да да)))
))))))))000000000
ПФ
это важно; ты задал хороший вопрос - можешь спросить его в скала ру чатике, тебе пояснят за квилл
Любые проверки и автодополнение лучше для меня как для пользователя, чем строки :)
ПФ
Итого есть два инструмента для типизации спарка. Из них работает: 0. Продолжаю наблюдения
ПФ
У квилла ОЧЕНЬ хороший api
ПФ
За это ему можно простить многое