Size: a a a

2019 March 11

ZM

ZLoyer Matveev in Moscow Spark
Pavel Klemenkov
Используете Spark ML в продакшене?
Анонимный опрос
16%
Используем на Scala
25%
Используем на Python
13%
Используем для инференса моделей (XGboost, lightgbm, etc)
46%
Вообще не используем ML в Spark
Проголосовало: 85
последний пункт непонятен, то ли мл нет, то ли нет спарк мл
источник

PK

Pavel Klemenkov in Moscow Spark
ZLoyer Matveev
последний пункт непонятен, то ли мл нет, то ли нет спарк мл
Нет ни обучения моделей, ни их инференса путем запуска спарк-джоб. Spark может использоваться для напиливания витрин фичей, например
источник

K

KrivdaTheTriewe in Moscow Spark
Это как
источник

K

KrivdaTheTriewe in Moscow Spark
Spark ML
Spark MLib
источник

PK

Pavel Klemenkov in Moscow Spark
KrivdaTheTriewe
Это как
Не понял вопрос
источник

ZM

ZLoyer Matveev in Moscow Spark
Pavel Klemenkov
Не понял вопрос
опрос про либы спарковские или про мл в спарке?)
источник

ZM

ZLoyer Matveev in Moscow Spark
если первое, то спасибо больше никогда, ненавижу авторов
источник

PK

Pavel Klemenkov in Moscow Spark
ZLoyer Matveev
опрос про либы спарковские или про мл в спарке?)
И про то, и про другое. Наверное плохо сформулировал, прошу прощения )
источник

ЕГ

Евгений Глотов... in Moscow Spark
Добавьте ещё пункт про mmlspark, вдруг кто-то уже юзает
источник

PK

Pavel Klemenkov in Moscow Spark
Евгений Глотов
Добавьте ещё пункт про mmlspark, вдруг кто-то уже юзает
Дурацкий телеграмный poll нельзя редактировать (
источник

ЕГ

Евгений Глотов... in Moscow Spark
У меня вот не получилось затащить либу в кластер, потому что она лежит в спарк пэкэджес, я её оттуда качнул, а там каких-то жёстких сишных расширений не хватает
источник

ЕГ

Евгений Глотов... in Moscow Spark
В принципе, такие либы, которые предоставляют топовый бустец на спарке, должны снять вопрос, на них бы все перешли, было бы удобно их юзать)
источник

ЕГ

Евгений Глотов... in Moscow Spark
Наши дсы считают, что в спарк мле кривой бустец. в принципе, не могу с ними не согласиться, качество реально хуже, чем у обычных фреймворков для кегла
источник

ЕГ

Евгений Глотов... in Moscow Spark
А что послужило отправной точкой для появления опроса? Статья про PravdaML и питонистов-лентяев?)
источник

PK

Pavel Klemenkov in Moscow Spark
Евгений Глотов
А что послужило отправной точкой для появления опроса? Статья про PravdaML и питонистов-лентяев?)
Статью не читал. Личный интерес )
источник

ЕГ

Евгений Глотов... in Moscow Spark
И на датафесте
источник

PK

Pavel Klemenkov in Moscow Spark
Она, ее уже переименовали? )
источник

PK

Pavel Klemenkov in Moscow Spark
@krivdathetriewe @pomadchin сделал вас админами группы
источник

ZM

ZLoyer Matveev in Moscow Spark
Помадчин больше не московский. Саске покинул деревню.
источник

PK

Pavel Klemenkov in Moscow Spark
ZLoyer Matveev
Помадчин больше не московский. Саске покинул деревню.
Ну в телегу-то он умеет заходить ) Как раз ночью будет чат от спаммеров чистить ))
источник