AD
и еще можно уменьшать модель другими способами, см FAQ в документации, там вопрос про размер модели есть
Size: a a a
2019 June 12
AS
Ещё пожелание: не могли бы вы добавить в command line версию обработчик unix-сигнала какого-нибудь типа USR1 для промежуточного снапшота на случай если забыл указать --snapshot-file перед запуском
AD
Это достаточно много работы и усложнение интерфейсов. Лучше не забывать указывать снэпшоты.
AS
Это достаточно много работы и усложнение интерфейсов. Лучше не забывать указывать снэпшоты.
Да понятно что лучше 🙂 Кстати, раз в сколько итераций он сохраняет? В доке не нашел. Или он просто на каждой итерации дописывает в конец файла новое деревце?
AD
Точно не помню, вроде раз в 5 минут. Добавим в документацию, спасибо, что заметил, что там нет этого!
AS
Может он просто на каждой итерации дописывает в конец файла новое деревце?
AD
Сохраняем раз во сколько-то времени. Либо 5 минут, либо 10
AS
Спасибо. А ещё заметил в документации все ссылки "CatBoost JSON model tutorial" ведут на https://github.com/catboost/tutorials/blob/master/apply_model/model_export_as_json_tutorial.ipynb которая 404 =(
AD
Если замечаешь ошибки, лучше всего создавать issue, чтобы они потом не потерялись. Спасибо, что заметил! Если не сложно, открой issue
NM
!report
2019 June 13
Д
Спасибо, теперь понял)
Д
деревья подбираются последовательно
Д
А вот подбор самого дерево параллелиться по данным (большое число вычислениц можно делать в много потоков)
2019 June 14
P🐈
Что означает ошибка "blocks must be big enough to contain more than a single group" ?
AK
При применении из CLI CatBoost читает датасет блоками не больше чем фиксированное число документов, при этом если данные по группам, то есть техническое ограничение, чтобы размер блока был не больше самой большой группы.
Это ограничение планируется исправить.
Пока для применения, если это не расчет метрик, где учитываются группы, могу посоветовать передавать cd-файл где не будет колонок GroupId/QueryId и SubgroupId, а соответствующие колонки будут помечены как Auxiliary.
Это ограничение планируется исправить.
Пока для применения, если это не расчет метрик, где учитываются группы, могу посоветовать передавать cd-файл где не будет колонок GroupId/QueryId и SubgroupId, а соответствующие колонки будут помечены как Auxiliary.
AK
Ну или использовать python API, там данные загружаются целиком
AS
А где почитать про группы/подгруппы и зачем они нужны?
AK
группы - просто можно сгруппировать данные по какому-то признаку
P🐈
При применении из CLI CatBoost читает датасет блоками не больше чем фиксированное число документов, при этом если данные по группам, то есть техническое ограничение, чтобы размер блока был не больше самой большой группы.
Это ограничение планируется исправить.
Пока для применения, если это не расчет метрик, где учитываются группы, могу посоветовать передавать cd-файл где не будет колонок GroupId/QueryId и SubgroupId, а соответствующие колонки будут помечены как Auxiliary.
Это ограничение планируется исправить.
Пока для применения, если это не расчет метрик, где учитываются группы, могу посоветовать передавать cd-файл где не будет колонок GroupId/QueryId и SubgroupId, а соответствующие колонки будут помечены как Auxiliary.
Спасибо, помогло