OP
А YT выходило куда-нибудь за рамки яндекса ?
Size: a a a
2019 October 06
OI
А YT выходило куда-нибудь за рамки яндекса ?
Я помню, что в какой-то статье на хабре его даже обещали когда-нибудь в opensource выложить.
AZ
Привет ребятки!
Сталкивались ли вы с задачей возврата результатов работы некой модели обратно в продукт или связанные с ним тулы типа CRM, как решали?
Сталкивались ли вы с задачей возврата результатов работы некой модели обратно в продукт или связанные с ним тулы типа CRM, как решали?
Буквально в каждом проекте, операционализация МЛ как раз про то как подать результат скоринга/инференса в точку принятия решения. Зависит от того что умеет система-приемник и требований актуальности данных, я сталкивался с вариантами от отгрузки таблиц со скорами, до всяких RPC и непосредственно отгрузки модели в устройство.
EV
Круто, дам немного контекста,
сейчас модель - это SQL, который персистится и используется для репортинга. Нужно этот персист отдать в Salesforce и в продукт, вот думаю как это организовать, так как пока что нет такого опыта в компании
По сути это табличка ключ-значение.
сейчас модель - это SQL, который персистится и используется для репортинга. Нужно этот персист отдать в Salesforce и в продукт, вот думаю как это организовать, так как пока что нет такого опыта в компании
По сути это табличка ключ-значение.
AZ
Круто, дам немного контекста,
сейчас модель - это SQL, который персистится и используется для репортинга. Нужно этот персист отдать в Salesforce и в продукт, вот думаю как это организовать, так как пока что нет такого опыта в компании
По сути это табличка ключ-значение.
сейчас модель - это SQL, который персистится и используется для репортинга. Нужно этот персист отдать в Salesforce и в продукт, вот думаю как это организовать, так как пока что нет такого опыта в компании
По сути это табличка ключ-значение.
Начать с того что узнать как продукт и СФ могут принять модель
EV
пока договорились строить mvp на том что раз в день отгружать в s3 в виде файла, а в продукте забирать, и оттуда же слать апдейт в SF
EV
но мне такая схема заочно не очень нравится и думаю что в идеале надо будет пилить микросервис
AZ
Если вы передаёте модель, и она обновляется раз в день (или реже), то файло обмен очень даже норм; если вы передаёте скор, то зависит от того как часто обновляются данные под скоринг; дальше для разных форматов моделей уже понаписали сервисов, от openscoring (PMML), до всяких обёрток над питонячьим кодом и ТФ
AZ
Вам наверное PMML воркфлоу может подойти, судя по косвенным признакам
EV
речь именно про результаты
EV
быстрый гуглеж не помог понять чем тут может помчь PMML, но в любом случае спасибо
АП
А Какой размер файла?
TT
Pmml несвободная лицензия
TT
Для реального прода надо платить
TT
Если результат модели просто таблица - сохраняйте тупо ее в csv, parquet, любой формат который даунстрим система быстро прочтёт
TT
Можно даже редис и монгу
AZ
Tsh Tsh
Для реального прода надо платить
Кому, DMG?
EV
А Какой размер файла?
несколько млн строк, фигня в общем
AZ
быстрый гуглеж не помог понять чем тут может помчь PMML, но в любом случае спасибо
PMML это стандарт на сериализацию моделей, в таком виде модель можно сохранить и использовать например в сервисе, или в хранимой процедуре, или передать приложению которое понимает этот стандарт
EV
а, ну тут про модель, а не про сами данные