var XRange = Range (start, end, 1)
Это указываем диапазон что ввели, например дату 20210301 до 20210603

И функция udf:

Так а чего парюсь....

и

в чем проблема то

типы все верные?

без зинпута все ок?

чо ты пробовал

где тело удф которая не работает

Только прописал в место (score > 0.5) это XRange.contains(data)

Тупо в udf прописал:
Range (20210301, 20010603, 1).contains(data) и всё при вызове функции со столбцом из БД заработало

Получается без ЗИПУТА всё ОК

Да

Только так сейчас смог 😄

дава сутречка код с примерап окиадешь

привет, может кто встречался с загагулиной феникса
загружал в него датафрейм из спарка и долго думал, что он не зашел полностью, потому что селекты показывали мало данных
а сегодня сделал count(*) - все строчки на месте
а вот group by по основному ключу показывает кучу дублей(в моем случае 24) в выборке
типа
key1 10000
key1 12000
key1 9000
key2 11000
key2 8000
...
из-за этого и селекты похоже нормально не работают. план запроса нормальный
как такое может быть?

при этом count(distinct key) выдает верное число ключей

привет! а если вручную обновить статистику?