Size: a a a

2019 December 05

GP

Grigory Pomadchin in Data Engineers
Dmitry Zuev
Пыжиков вон там что то пытался
ну у них есть нечто Coercible может оно как-то решает частично проблемы
источник

DZ

Dmitry Zuev in Data Engineers
implicit def coercibleEq[R, N](implicit ev: Coercible[Eq[R], Eq[N]], R: Eq[R]): Eq[N] =
 ev(R)
источник

DZ

Dmitry Zuev in Data Engineers
ну да, как раз твой кейс
источник

DZ

Dmitry Zuev in Data Engineers
Как потом спарк дев нанимать на такой код?
источник

DZ

Dmitry Zuev in Data Engineers
источник

GP

Grigory Pomadchin in Data Engineers
ну ка дай попробую; мне кажется сирка не выведет кодеки
источник

DZ

Dmitry Zuev in Data Engineers
источник

GP

Grigory Pomadchin in Data Engineers
ну если оно работает я свое попробую еще раз для шаплезовых написать; я пробовал, оно только полу вручную заводилось
источник

GP

Grigory Pomadchin in Data Engineers
ну или просто эти использовать буду... у меня не так много нью тайпов лень тащить либу для этого
источник

DZ

Dmitry Zuev in Data Engineers
Grigory Pomadchin
ну или просто эти использовать буду... у меня не так много нью тайпов лень тащить либу для этого
повод обмазать
источник

DZ

Dmitry Zuev in Data Engineers
источник

GP

Grigory Pomadchin in Data Engineers
Dmitry Zuev
повод обмазать
подцепляет!
источник

GP

Grigory Pomadchin in Data Engineers
источник

GP

Grigory Pomadchin in Data Engineers
два коерсабла объявляешь для кодеков, и он автоматически выведет все для нью тайпов
источник

GP

Grigory Pomadchin in Data Engineers
порядок только важен конечно же
источник

DZ

Dmitry Zuev in Data Engineers
Grigory Pomadchin
два коерсабла объявляешь для кодеков, и он автоматически выведет все для нью тайпов
Покаж
источник

GP

Grigory Pomadchin in Data Engineers
Dmitry Zuev
Покаж
источник

DZ

Dmitry Zuev in Data Engineers
Ааа, я думал шейплезевый завел
источник
2019 December 06

GP

Grigory Pomadchin in Data Engineers
не; сейчас шаплезовый попробую
источник

DP

Dmitry P in Data Engineers
Всем привет. Вопрос по SparkSQL. А можно ли при чтении некоторого кол-ва json'ов в датафрейм сделать так чтобы датафрейм содержал только те поля, которые указаны в схеме? Хочется отбросить ненужное.
источник