GP
он в определенной степени всегда будет странноват изза ограничений спарка всеж
Size: a a a
2021 July 12
GP
типо нельзя для рдд инстансы обычных монад делать или функторов
GP
но это совершенно не значит что надо лепить все в одном классе чтоб рефакторингом случайно не убить сериализацию а потом ругаться на спарк
GP
у вас не kryo чтоле в проде?)
EK
Конкретно этих ошибок - не бывает. Могу ставить хату, когда перемещаю туда-сюда методы и параметры в обычном коде
EK
У нас что попало в проде. Где-то крио, где-то нет. Крио все равно вроде по умолчанию делает джава сериализацию. Но могу ошибаться
EK
Слава богу, я ухожу)
GP
можешь свои сериализаторы делать для нежава сериализуемых обектов
GP
ну я еще раз написал) то как ты делаешь делают почти все
но не потому что так надо или правильно
так проще всего
но не потому что так надо или правильно
так проще всего
GP
в долгосроке и в больших проектах это неподдерживаемые макароны
EK
Я не говорю про написание всего в одном файле. Да, нужна модулярность. Просто я классов стараюсь избегать. Вот и все.
А так большая часть людей пишет говно на спарке, потому что и без спарка не могут написать нормально. А не потому что при наличии спарка в класспасе в них просыпается джун
А так большая часть людей пишет говно на спарке, потому что и без спарка не могут написать нормально. А не потому что при наличии спарка в класспасе в них просыпается джун
GP
ну про классы я корчое всеравно не согласен
но со остальной частью согласен (почти) полностью
но со остальной частью согласен (почти) полностью
GP
видел не раз случаи когда жун внезапный просыпался и начинал лепить все в кучу потому что ‘это же спарк’
GP
бриться было ошибкой конечно)
EK
Короче, сформулировал: применение бест практис в спарке дает намного меньше позитивного подкрепления
GP
не понял смысл предложения
EK
В нормальном программировании ты отрефакторил что-то, оно стало красивее, понятнее, все работает, ты рад, завтра повторишь.
В спарке пытаешься сделать по науке - получаешь NonSerializableException. В следующий раз дважды подумаешь
В спарке пытаешься сделать по науке - получаешь NonSerializableException. В следующий раз дважды подумаешь
AT
О, привет, когда в понв вернешься?
ZM
ну так надо инвестировать немного времени чтобы разобраться как оно работает
постоянный бег от этой ошибки - признак того что нет понимания принципов
постоянный бег от этой ошибки - признак того что нет понимания принципов