LT
И я, соответственно, ищу способ дёргать бд, на который не будет ругаться спарк
Size: a a a
2021 September 01
ЕГ
В том куске кода нет логгирования в млфлоу
LT
да, сейчас покажу целиком
ЕГ
А, стапэ, это всё исполняется внутри млфлоу?
ЕГ
Кароч ты засунул спарк.скл в спарк.скл
LT
вот да, он так и говорит
ЕГ
Та функция уже типа в юдфке работает
LT
но почему и как это сделать правильно, не знаю
ЕГ
Ты не можешь из неё запросы закидывать
LT
никак?
ЕГ
Надо где-то искать итоговую функцию, которая получает весь предикт, а не по каждой строчке
LT
но мне надо по каждой строчке
LT
это вообще говоря сервис для чат-бота
LT
просто я не могу использовать sqlite или еще что-то адекватное, потому что данные хранятся в databricks
ЕГ
А зачем в сервисе в реалтайме млфлоу?
LT
чтобы дергать модельку через rest api
LT
есть вариант сделать контейнер, но тогда сильно усложняется хождение к бд
ЕГ
Моделька на один запрос выдаёт ответ?
LT
ЕГ
Если да, то почему она оказалась внутри спарк-кода?