ЕГ
И гораздо проще провалидировать схему в джисоне, чем в 100500 кейсклассах
Size: a a a
2021 August 20
ПФ
Но на каждом шаге
ЕГ
А уж насколько легче её поправить в случае косяка...
ПФ
Нинасколько?
NN
На каждом шаге - ты что имеешь в виду?
В общем-то, достаточно над сырьем это сделать.
В общем-то, достаточно над сырьем это сделать.
ПФ
И над каждым мапом и редьюсом и селектом
ПФ
Потому что в строках очень просто ошибиться
B
Обучаю скала спарку джунов, аналитеков и бизнес заказчиков. Никаких проблем вообще. Даём им ноутбук с скала-ядром и радуемся успехам
ПФ
Почти над любой операцией кроме фильтра
ПФ
А на кейс-классах у тебя нету строк, только поля
NN
Можешь пример привести?
Не понял (
Не понял (
NN
У нас на такое времени нет, деньги хотят делать сразу, а не через n времени.
B
Неделя времени
ПФ
Ну вот ты делаешь
xxx.select("a", "b", "c"), потом приводишь "c" к инту чтобы к нему что-то добавить и всё падает. Потому что тебе нужен был не c, а d.
xxx.select("a", "b", "c"), потом приводишь "c" к инту чтобы к нему что-то добавить и всё падает. Потому что тебе нужен был не c, а d.
NN
Ну, не знаю, кого вы набираете.
У нас гораздо больше времени часто уходит на обучение приличным образом работать хотя бы с пайспарком.
У нас гораздо больше времени часто уходит на обучение приличным образом работать хотя бы с пайспарком.
ПФ
С типами ты не делаешь селекта, ты делаешь мап на какой-то кейс класс и в нём типы проставлены
NN
Ну, ок.
Ты же не сразу в прод пихаешь код, так?
На тестовом сэмпле это делаешь небольшом, он падает.
Не виду в этом большой потери времени и нагрузки на кластер.
Ты же не сразу в прод пихаешь код, так?
На тестовом сэмпле это делаешь небольшом, он падает.
Не виду в этом большой потери времени и нагрузки на кластер.
ПФ
Только наверное лучше не сложение, а деление
ЕГ
Вы пишете код, а ребята задачи решают - сначала написали запрос, который решил задачу, а потом уже в прод ставят рабочий код заведомо
B
Прилично пайспарком? Что это значит вообще