Телеграмм чат группы catboost

Ну, учитывая, что она набирает популярность, совсем не глупый. Пока не поддерживает, но работаем над этим. А интересует только применение или обучение тоже?

Релевантные issue:
https://github.com/catboost/catboost/issues/408
https://github.com/catboost/catboost/issues/1472
https://github.com/catboost/catboost/issues/1526

Если интересует только применение, то можно сохранить модель в ONNX формате, для него есть соотв. библиотеки. Там правда есть ограничения - счетчики для категориальных признаков не поддерживаются.

GitHub

C++ evaluator for ARM architecture · Issue #408 · catboost/catboost

Problem: As of now, according to this tutorial, catboost doesn't support cpp evaluator compilation for ARM architectures. Is it any plans for one of following solutions: Adding make/CMake/b...

источник

20:28пожаловаться #7

S

Sergii in catboost_ru

Andrei Khropov

Ну, учитывая, что она набирает популярность, совсем не глупый. Пока не поддерживает, но работаем над этим. А интересует только применение или обучение тоже?

Релевантные issue:
https://github.com/catboost/catboost/issues/408
https://github.com/catboost/catboost/issues/1472
https://github.com/catboost/catboost/issues/1526

Если интересует только применение, то можно сохранить модель в ONNX формате, для него есть соотв. библиотеки. Там правда есть ограничения - счетчики для категориальных признаков не поддерживаются.

GitHub

C++ evaluator for ARM architecture · Issue #408 · catboost/catboost

Problem: As of now, according to this tutorial, catboost doesn't support cpp evaluator compilation for ARM architectures. Is it any plans for one of following solutions: Adding make/CMake/b...

Да, я уже находил этот тикет. Интересует именно обучение :(

источник

20:29пожаловаться #8

SK

Stanislav Kirillov in catboost_ru

Пока наши девтулзы работают над этим

источник

20:29пожаловаться #9

S

Sergii in catboost_ru

🙏

источник

21:06пожаловаться #10

IK

Ivan Kolemasov in catboost_ru

Andrei Khropov

Версия catboost_spark обновилась до 0.25-rc3, там исправлены некоторые баги + загрузка и сохранение моделей из/в обычные форматы CatBoost + я обновил документацию - теперь там есть и про PySpark с примерами.

👍

источник

22:30пожаловаться #11

2021 January 30

TB

Taras B in catboost_ru

@kizill а когда выйдет версия с фиксами для эмбединга?

источник

15:52пожаловаться #12

2021 February 01

ВК

Вячеслав Колосков... in catboost_ru

Andrei Khropov

Начинать лучше с Readme тут - https://github.com/catboost/catboost/tree/master/catboost/spark/catboost4j-spark

GitHub

catboost/catboost

A fast, scalable, high performance Gradient Boosting on Decision Trees library, used for ranking, classification, regression and other machine learning tasks for Python, R, Java, C++. Supports comp...

пытаюсь выполнить:

import catboost_spark

получаю ошибку:

Py4JJavaError: An error occurred while calling None.ai.catboost.spark.params.QuantizationParams.
: java.lang.AbstractMethodError: ai.catboost.spark.params.QuantizationParams.org$apache$spark$ml$param$Params$_setter_$org$apache$spark$ml$param$Params$$paramMap_$eq(Lorg/apache/spark/ml/param/ParamMap;)V

источник

17:40пожаловаться #13

IK

Ivan Kolemasov in catboost_ru

Andrei Khropov

Версия catboost_spark обновилась до 0.25-rc3, там исправлены некоторые баги + загрузка и сохранение моделей из/в обычные форматы CatBoost + я обновил документацию - теперь там есть и про PySpark с примерами.

Совместимость со Spark версии <2.4.0 не гарантируется или абсолютно точно не взлетит?

источник

18:32пожаловаться #14

AK

Andrei Khropov in catboost_ru

Ivan Kolemasov

Совместимость со Spark версии <2.4.0 не гарантируется или абсолютно точно не взлетит?

Скорее всего не взлетит, потому что использовались вызовы API, которые есть только начиная с 2.4.0. Если очень надо я могу проверить можно ли сделать совместимость с более ранней версией.

источник

18:56пожаловаться #15

AK

Andrei Khropov in catboost_ru

Вячеслав Колосков

пытаюсь выполнить:

import catboost_spark

получаю ошибку:

Py4JJavaError: An error occurred while calling None.ai.catboost.spark.params.QuantizationParams.
: java.lang.AbstractMethodError: ai.catboost.spark.params.QuantizationParams.org$apache$spark$ml$param$Params$_setter_$org$apache$spark$ml$param$Params$$paramMap_$eq(Lorg/apache/spark/ml/param/ParamMap;)V

версия 0.25-rc2 или 0.25-rc3 ?

источник

19:01пожаловаться #16

МН

Максим Новопольцев... in catboost_ru

Andrei Khropov

Скорее всего не взлетит, потому что использовались вызовы API, которые есть только начиная с 2.4.0. Если очень надо я могу проверить можно ли сделать совместимость с более ранней версией.

+ проверку на более ранних версиях. интересует 2.3.2

источник

19:01пожаловаться #17

IK

Ivan Kolemasov in catboost_ru

Andrei Khropov

Скорее всего не взлетит, потому что использовались вызовы API, которые есть только начиная с 2.4.0. Если очень надо я могу проверить можно ли сделать совместимость с более ранней версией.

если это возможно - будет здорово (spark 2.3.1)

в рамках теста:
(spark 2.4+)
через spark-packages зависимости должны без проблем прилетaть? интересует природа evicted зависимостей

источник

19:01пожаловаться #18

ВК

Вячеслав Колосков... in catboost_ru

Andrei Khropov

версия 0.25-rc2 или 0.25-rc3 ?

.config("spark.jars.packages", "ai.catboost:catboost-spark_2.11:0.25-rc3")

источник

19:02пожаловаться #19

AK

Andrei Khropov in catboost_ru

@maximazzik Ivan Про поддержку Spark 2.3.x создал https://github.com/catboost/catboost/issues/1566

GitHub

catboost-spark compatibility with Spark 2.3.x · Issue #1566 · catboost/catboost

Problem: Current catboost-spark version requires 2.4.x+.

источник

19:20пожаловаться #20