Size: a a a

2019 August 06

K

KrivdaTheTriewe in Data Engineers
ну не так это работает
источник

ПФ

Паша Финкельштейн in Data Engineers
А как?
источник

K

KrivdaTheTriewe in Data Engineers
ну в доке описано
источник

ПФ

Паша Финкельштейн in Data Engineers
В доке написано что это типизированное апи
источник

K

KrivdaTheTriewe in Data Engineers
все там в нужной степени типизировано( ну аргументы джоина нет, ок)
источник

ПФ

Паша Финкельштейн in Data Engineers
И всё
источник

ПФ

Паша Финкельштейн in Data Engineers
Там не типизировано почти ничего
источник

ПФ

Паша Финкельштейн in Data Engineers
Я внимательно прочитал доку, правда
источник

ПФ

Паша Финкельштейн in Data Engineers
И апи всё посмотрел
источник

K

KrivdaTheTriewe in Data Engineers
где dataframe.as[Case classs].map(x=>) не типизированный то
источник

ПФ

Паша Финкельштейн in Data Engineers
Хороший пример типизированного апи - как раз quill
источник

K

KrivdaTheTriewe in Data Engineers
это плохой пример
источник

ПФ

Паша Финкельштейн in Data Engineers
KrivdaTheTriewe
где dataframe.as[Case classs].map(x=>) не типизированный то
Это самая ненужная операция из всех
источник

ПФ

Паша Финкельштейн in Data Engineers
Потому что мне обычно надо преобразовать данные
источник

K

KrivdaTheTriewe in Data Engineers
map ?
источник

ПФ

Паша Финкельштейн in Data Engineers
Агрегировать их и всё такое
источник

K

KrivdaTheTriewe in Data Engineers
ну map для преобразования
источник

ПФ

Паша Финкельштейн in Data Engineers
Подожди, тебе в мэп приходит уже твой кейс класс, прямо инстанс. Как ты с ним группировку сделаешь?
источник

ПФ

Паша Финкельштейн in Data Engineers
И да, сджойнишь с другими данными
источник

K

KrivdaTheTriewe in Data Engineers
Паша Финкельштейн
И да, сджойнишь с другими данными
def joinWith[U](other: Dataset[U], condition: Column, joinType: String): Dataset[(T, U)] = {
источник