MK
😂😂😂
Size: a a a
2022 February 10
I
не зачем, просто ищу вариант как использовать скала код, ну и если вдруг не получится выбрать конкретную функцию из за кучи связей, чтоб вставить через udf, то подумал мб вызвать просто функцию
I
попробую сначала черзе udf разумеется, почему то был уверен что внутри нее нельзя импортировать ничего, думая что там урезанный функционал скалы
k
вызывать в udf жава / скала класс, как я выше написал - не стоит. нужно собрать жар с удф-ом, и вызывать из пуспарка зарегистрированный удф
k
в общем, в видео должно быть подробно описано
I
зарегистрированный в жарнике?
k
а если серьерзно - с пуспарком требуется больше приседаний, чем нативно писать. чем больше разного нестандартногл надо делать - тем больше приседаний 🤷♂ в итоге причины, по которым взяли пуспарк, отойдут на второй план, т. к. команде придется на скале писать все равно
k
видео посмотрели?
I
пошел смотреть)
I
спасибо!
I
слишком много людей учувствует просто
MK
сам пишу на скале, но регулярно пытаются доказать что скала НИНУЖНА и питона хватит
k
я понимаю. есть как есть 🤷♂
k
когда там 3.5 спарк жопс, может, и правда не нужна. как всегда - it depends
k
для EDA пуспарк тоже удобнее некторым
t
шо?
t
ПФ
А чо, можно как-то дёшево позвать JVM из пайтона?
t
не ну я про то что это 1 раз и на драйвере
t
и ты получаешь жавовую колонку