Size: a a a

2021 September 02

T

T in Data Engineers
Слушайте хочу очень странного: можно ли вытащить только алиас колонки в спарке?

Допусти у меня Seq(col("bla").as("blah")...)

Вот в какой-то момент мне надо что бы было только Seq(col("blah"))
источник

GP

Grigory Pomadchin in Data Engineers
не уверен, alias это алиас для экспрешона в общем смысле
источник

GP

Grigory Pomadchin in Data Engineers
типо я не знаю реальной сигнатуры но это наверное class Alias(exp, …., new name)
источник

GP

Grigory Pomadchin in Data Engineers
или даже просто Alias(exp, new name)
источник

T

T in Data Engineers
Да я чёт тоже не нашел, пришлось сделать через Seq[Tuple2[String, String]] и вспомогательных функций над ним но выглядит NEKRASIVO
источник

GP

Grigory Pomadchin in Data Engineers
можешь сделать свой алиас мож
источник

T

T in Data Engineers
Ну у меня разовая джоба свой алиас для нее жирновато будет писать. Я просто на всякий случай спросил вдруг не доглядел и можно было бы красиво вытащить.
источник

GP

Grigory Pomadchin in Data Engineers
): нету; я сча переписываю эти все экспрешоны с 2.4 в одном проекте на 3.1
источник

GP

Grigory Pomadchin in Data Engineers
источник

T

T in Data Engineers
Эх а так красиво было бы...
источник

GP

Grigory Pomadchin in Data Engineers
в frameless надо энивалы еще втащить
источник

GP

Grigory Pomadchin in Data Engineers
а то даж спарк умеет уже энивалы
источник

TG

Tony Gogin in Data Engineers
Ребят вопрос, кто то работал c Keboola и Stitch? какие впечатления?
источник

ИК

Иван Калининский... in Data Engineers
Попробуй cols.map(_.expr).map{case Alias() =>...
case NamedExpression() =>...
case _ =>...
}
Вроде возвращает namedExpression, не помню точно
источник

T

T in Data Engineers
О спасибо сейчас попробую
источник

T

T in Data Engineers
Да точно надо спасибо
источник
2021 September 03

K

KrivdaTheTriewe in Data Engineers
источник

AZ

Anton Zadorozhniy in Data Engineers
Хакнули админа?
источник

GP

Grigory Pomadchin in Data Engineers
думаю перепутал чят с жобсом
источник

GP

Grigory Pomadchin in Data Engineers
но вообще в мск дейсвительно сейчас третье сентября
источник