t
и ее соелектишь
Size: a a a
2022 February 10
ПФ
И каждый такой вызов оч дорогой )
t
ну и лан, он же один раз на дф делается
ПФ
Подождите, если это кусок udf (а мы вроде так говорили) — то это один колл на строку
t
неееее
t
1 раз на дф
ПФ
spark._sc._jvm.org.hadoop.fs?
t
no
t
такое не получится юзать
t
через _jvm ты достаешь spark.sql.Column
t
а внутри нее уже чо угодно
t
хоть в интернет ходи
t
(на воркере естесна)
k
сомнительно
ПФ
А, ну вот. Я просто не знаток пуспарка
k
аа, понял. т. е. если дергаем сам спарк-скала апи, то норм
нет, не понял. пойду изучать
нет, не понял. пойду изучать
k
никогда не тестил, правда. но часто приходидось _jvm из драйвера (не в удф) дергать в пуспарк проектах.
AK
Дискретно и безопастно 😅
ММ
Документы в подарок - это интересно 😀😁
AK
Привет, Дим)