Size: a a a

2021 January 21

S

Sergii in catboost_ru
Привет, встречал кто-то такую ошибку? State == nullptr пытаюсь запустить catboost на nvidia-docker, чтобы обучать модель на GPU, но видимо где-то я свернул не туда :( базовый образ взял FROM nvidia/cuda:10.0-cudnn7-devel-ubuntu18.04 катбуст свежий
источник

S

Stanislav in catboost_ru
Nikita Dmitriev
У тебя при этом обучение успешно завершается или падает?
Завершается вроде, просто он занимает место в облачной папке.
источник

S

Stanislav in catboost_ru
И весит 2-5 гигов
источник

ND

Nikita Dmitriev in catboost_ru
Stanislav
Завершается вроде, просто он занимает место в облачной папке.
Просто это очень похоже на дамп памяти, но он должен создаваться только если обучение упало
Можешь попробовать удалить этот файл, запустить обучение еще раз и после обучения вызвать model.get_feature_importance(), что бы убедиться, что модель действительно обучилась
И потом посмотреть появился ли этот файлик или нет
источник

S

Stanislav in catboost_ru
Nikita Dmitriev
Просто это очень похоже на дамп памяти, но он должен создаваться только если обучение упало
Можешь попробовать удалить этот файл, запустить обучение еще раз и после обучения вызвать model.get_feature_importance(), что бы убедиться, что модель действительно обучилась
И потом посмотреть появился ли этот файлик или нет
Да, при падении обучения создаётся. А с ним можно что-то сделать? Указать другую папки или чтобы он вообще не создавался? Я экспериментирую с фичами и когда их много все падает временами
источник

ND

Nikita Dmitriev in catboost_ru
Stanislav
Да, при падении обучения создаётся. А с ним можно что-то сделать? Указать другую папки или чтобы он вообще не создавался? Я экспериментирую с фичами и когда их много все падает временами
Ты можешь выполнить команду ulimit -c 0 которая устанавливает максимальный размер дампа. Соответственно если выставишь 0 он не будет создаваться
источник

S

Stanislav in catboost_ru
Nikita Dmitriev
Ты можешь выполнить команду ulimit -c 0 которая устанавливает максимальный размер дампа. Соответственно если выставишь 0 он не будет создаваться
Ок, благодарю за ответ
источник
2021 January 22

IK

Ivan Kolemasov in catboost_ru
Привет, народ!
Кто может подсказать где подсмотреть как устроено pyspark api  для катбуста?
источник

SK

Stanislav Kirillov in catboost_ru
Ivan Kolemasov
Привет, народ!
Кто может подсказать где подсмотреть как устроено pyspark api  для катбуста?
источник

AK

Andrei Khropov in catboost_ru
Я сегодня обновлю документацию, там будут примеры.
источник

IK

Ivan Kolemasov in catboost_ru
Andrei Khropov
Я сегодня обновлю документацию, там будут примеры.
спс
источник

ВК

Вячеслав Колосков... in catboost_ru
Andrei Khropov
Я сегодня обновлю документацию, там будут примеры.
а подскажите как библиотеку импортировать? :)
источник

ВК

Вячеслав Колосков... in catboost_ru
from ai.catboost import catboost_spark ? :)
источник

AK

Andrei Khropov in catboost_ru
Нет. Чуть позже напишу.
источник

AS

Aleh Sauko in catboost_ru
Всем привет) подскажите пожалуйста, если возможно сохранять/загружать модель из s3?

и может есть у кого пример какой-нибудь?
источник

SK

Stanislav Kirillov in catboost_ru
Привет!
источник

SK

Stanislav Kirillov in catboost_ru
Мы умеем загружать модели из строки или стрима
источник

SK

Stanislav Kirillov in catboost_ru
так что ты можешь сделать загрузку через requests или если твоя библиотека  для s3 умеет отдавать file-like stream
источник

SK

Stanislav Kirillov in catboost_ru
cbm = CatBoost()
cbm.load_model(stream=your_s3_stream)
источник

SK

Stanislav Kirillov in catboost_ru
Второй вариант - через загрузку из бинарной строки, если есть
источник