AS
что значит редкие?
редко встречающиеся в дата-сете
Size: a a a
2021 January 08
d
Избавь господь от моделей любящих редко встречающиеся признаки)
AS
Очень полезно понимать зачем это нужно оценить - может быть можно оценить что-то более четкое
Допустим есть две модели, обе имеют одинаковые оценки по допустим F1, но одна модель хорошо работает на практике на редких кейсах а другая нет
AS
если о деревьях допустим у одной модели большая глубина а у другой нет
d
Допустим есть две модели, обе имеют одинаковые оценки по допустим F1, но одна модель хорошо работает на практике на редких кейсах а другая нет
Ага, то есть речь про редкие / частые кейсы
d
А почему важно работает ли модель лучше на редких кейсах или на частых?
AS
в некоторых задачах важно не как модель ведет себя в среднем а как ведет себя в худшем случае
d
в некоторых задачах важно не как модель ведет себя в среднем а как ведет себя в худшем случае
Если есть способ четко определить что значит редкий / частый пример, я бы начал с того что разбил валидацию на две выборки - редкие и частые. А может и вообще откинуть из валидации частые примеры если уж они не важны
d
Но конечно лучше бы метрику четче определить - какое именно поведение модели в худшем случае является плохим, тогда будет еще лучше
d
То есть это вопрос на самом деле про метрику, насколько я это вижу. Которая включает в себя валидационное множество, собственно метрику штрафов (которая скорее всего не f1) и веса примеров
2021 January 09
ES
Добрый день.
Подскажите, пожалуйста по умолчанию как использовать text_feature - колонки?
Получаю такую ошибку:
catboost.git/catboost/private/libs/feature_estimator/text_feature_estimators.cpp:89: Dictionary size is 0, check out data or try to decrease occurrence_lower_bound parameter
Подскажите, пожалуйста по умолчанию как использовать text_feature - колонки?
Получаю такую ошибку:
catboost.git/catboost/private/libs/feature_estimator/text_feature_estimators.cpp:89: Dictionary size is 0, check out data or try to decrease occurrence_lower_bound parameter
d
Вопрос про магию с параметрами:
Я пробую менять iterations при фиксированном LR (другие параметры по умолчанию)
При этом у меня категорически меняется результат который получается на первых 100 итерациях
Я предполагаю, что есть еще какие-то параметры которые меняются с учетом заданных lr и iterations, но не знаю какие.
Где про это читать?
Я пробую менять iterations при фиксированном LR (другие параметры по умолчанию)
При этом у меня категорически меняется результат который получается на первых 100 итерациях
Я предполагаю, что есть еще какие-то параметры которые меняются с учетом заданных lr и iterations, но не знаю какие.
Где про это читать?
SS
Seed
d
Sergey Salnikov
Seed
Результат отличается прям супер сильно, при этом воспроизводимо - 100 итераций одно, 400 итераций (первые 100) - совсем другое
SS
Построй plot на fit
Аa
Вопрос про магию с параметрами:
Я пробую менять iterations при фиксированном LR (другие параметры по умолчанию)
При этом у меня категорически меняется результат который получается на первых 100 итерациях
Я предполагаю, что есть еще какие-то параметры которые меняются с учетом заданных lr и iterations, но не знаю какие.
Где про это читать?
Я пробую менять iterations при фиксированном LR (другие параметры по умолчанию)
При этом у меня категорически меняется результат который получается на первых 100 итерациях
Я предполагаю, что есть еще какие-то параметры которые меняются с учетом заданных lr и iterations, но не знаю какие.
Где про это читать?
У обученной модели есть метод, который выводит ВСЕ её параметры, в том числе те, что ты не задавал явно.
Аa
Название не помню
d
У обученной модели есть метод, который выводит ВСЕ её параметры, в том числе те, что ты не задавал явно.
Разумно, попробую проверить фактически что отличается
SS
get_params
PT
Вопрос про магию с параметрами:
Я пробую менять iterations при фиксированном LR (другие параметры по умолчанию)
При этом у меня категорически меняется результат который получается на первых 100 итерациях
Я предполагаю, что есть еще какие-то параметры которые меняются с учетом заданных lr и iterations, но не знаю какие.
Где про это читать?
Я пробую менять iterations при фиксированном LR (другие параметры по умолчанию)
При этом у меня категорически меняется результат который получается на первых 100 итерациях
Я предполагаю, что есть еще какие-то параметры которые меняются с учетом заданных lr и iterations, но не знаю какие.
Где про это читать?
Тоже встречался с этим. Устанавливаю 20 итераций - получаю один результат. Меняю 20 на 900 (число итераций), на 20 итерации результат отличается кардинально. Сид зафиксирован. Воспроизводится стабильно. Подозреваю, что какие-то параметры по умолчанию устанавливаются в зависимости от заданного числа итераций