Size: a a a

2019 September 06

m

mel kaye in Data Engineers
.drop/.take?
источник

OP

O. Petr in Data Engineers
drop колонку же дропает
источник

OP

O. Petr in Data Engineers
а take возьмет первые N
источник

OP

O. Petr in Data Engineers
В общем не пойдет
источник

m

mel kaye in Data Engineers
O. Petr
drop колонку же дропает
тогда фильтр
источник

m

mel kaye in Data Engineers
df.filter(lambda elem: elem != df.first())
источник

m

mel kaye in Data Engineers
O. Petr
а take возьмет первые N
df.take(df.count() - 1)
источник

m

mel kaye in Data Engineers
O. Petr
в 1 колонке 1 row удалить во второй последний
а с остальными ты что собрался делать?
источник

m

mel kaye in Data Engineers
у тебя будет по итогу m-2 колонок длиной n и 2 n-1
источник

m

mel kaye in Data Engineers
ты там дата саенсом случайно не занимаешься?
источник

OP

O. Petr in Data Engineers
mel kaye
у тебя будет по итогу m-2 колонок длиной n и 2 n-1
ага сё именно так 1 - N и 2 по (N-1)
источник

OP

O. Petr in Data Engineers
первый N-1 в отдельный df
источник

OP

O. Petr in Data Engineers
и к нему второй засуну
источник

m

mel kaye in Data Engineers
так а что ты собственно делаешь: дата саенс или дата инжиниринг?
источник

m

mel kaye in Data Engineers
:/
источник

OP

O. Petr in Data Engineers
а так инжиниринг чистый просто грят покажите что и мл ваш спарк может
источник

m

mel kaye in Data Engineers
кто мы?
источник

m

mel kaye in Data Engineers
и кого оценили?
источник

ЕГ

Евгений Глотов in Data Engineers
Короче тут похоже просто обработка данных, нужно лаг(1) или 2 получить, только видимо глобальный, на весь датафрейм
источник

m

mel kaye in Data Engineers
пока выглядит как: вот вам данные, сделайте с ними то не знаю что при том совмещая скилы с 2ух (если не 3ех) разных областей
источник