ЕГ
А хоть какой-то ключ есть?
Size: a a a
2021 October 08
ЕГ
Частичный
Е
нужен ближайший
вообще задача свести 2 потока данных в 2 таблицах в одну со всеми полями обеих
похоже юнион + лаг, но колонки в них разные, и надо будет сначала докидывать пустых колонок
я придумал может сделать промежуточную таблицу union(ts1, ts2).distinct(), потом с помощью lag привести к виду ts, previous_ts
и использовать ее при джойне, то есть будет джойн 3 таблиц
вообще задача свести 2 потока данных в 2 таблицах в одну со всеми полями обеих
похоже юнион + лаг, но колонки в них разные, и надо будет сначала докидывать пустых колонок
я придумал может сделать промежуточную таблицу union(ts1, ts2).distinct(), потом с помощью lag привести к виду ts, previous_ts
и использовать ее при джойне, то есть будет джойн 3 таблиц
Е
ключ есть, джойн будет по ключу+ts
ЕГ
Тогда проще по ключу поджойнить, а потом фильтрами отобрать
ЕГ
Если хадуп большой)
ЕГ
И ноды ваши быстры)
ЕГ
Типа джойним все тс на все тс, потом группируем по ключу key+ts1, и ищем запись с минимальным ts2 - ts1
ЕГ
Либо вместо юнион + лаг нужен юнион + first(ts if <ts из второго набора>else null) order by ts rows between current row and unbounded following
ЕГ
Это если ближайший с одной стороны😆
ПБ
Друзья! Если у меня код в виде строки, можно его выполнить типа
Execute(var)
Execute(var)
GP
привет! а какой код?
GP
это скала или жава?
так то можно любой код в виде строки распарсить и выполнить (собсна что компиляторы / интерпретаторы делают)
так то можно любой код в виде строки распарсить и выполнить (собсна что компиляторы / интерпретаторы делают)
N
eval $MY_BASH_CODE
ПБ
GP
Df=eval(var) полагаю; если это петон
ЕГ
В пуфоне eval("code")
GP
дыа такой ниоч спарко вопрос
ЕГ
Ещё раз хочу обратиться к сообществу с просьбой писать join(df2, ["vars", "to", "join"])
ЕГ
А то потом ведь самим же мучиться выбирать нужные колонки, ладно в эскуэле без этого никак, но здесь, то смёрждится само и без всяких дублей колонок)