AK
Всем привет. Так здесь подсказки? Или решения?
Если второе сообщите плиз я ливну
Если второе сообщите плиз я ливну
обсуждение
Size: a a a
2017 February 15
ИС
А принимает не только 0 и 1, если отправить все нули, то получаем предполагаемые 28% ошибок, если все по 0,5 отправить, то 50%. Запутанно как-то все
Сейчас точно считается мае. Вопрос в том, логичен ли мае в этой задаче
a
обсуждение
Спасибо. 👍
SF
Сейчас точно считается мае. Вопрос в том, логичен ли мае в этой задаче
в формулировке задачи на сайте написано, что нужно только 1 и 0, тогда логично accuracy. если вопреки этому все же принимаются не целые значения, то логичнее RMSE и надо поменять формулировку. и добавить всем попытку на сегодня! по-моему, так. :)
AB
МАЕ в данном случае это тот же 1 - accuracy
AB
то есть смело можно оптимизировать по accuracy
YI
то есть смело можно оптимизировать по accuracy
не вноси в хаос сумятицу
NK
я не прочитал всю переписку, но классическая метрика для задачи классификации это ROC AUC которая фактически зависит от порядка предсказаний значений
SF
А это не классификация, как выяснилось
ИС
в формулировке задачи на сайте написано, что нужно только 1 и 0, тогда логично accuracy. если вопреки этому все же принимаются не целые значения, то логичнее RMSE и надо поменять формулировку. и добавить всем попытку на сегодня! по-моему, так. :)
Мы просмотрели 120+ присланных решений, из них видно, что все ориентировались на accuracy (0vs1), поэтому самым лучшим вариантом кажется просто поменять метрику и пересчитать по ней решения, тем более что top в этом случае останется неизменным
YI
Мы просмотрели 120+ присланных решений, из них видно, что все ориентировались на accuracy (0vs1), поэтому самым лучшим вариантом кажется просто поменять метрику и пересчитать по ней решения, тем более что top в этом случае останется неизменным
еще день не прошел. если хотите исправить на нормальную метрику — еще не поздно
ИС
А это не классификация, как выяснилось
В той формулировке, которую мы дали, задача действительно считается задачей классификации, так что лучше пойти по пути наибольшего сохранения смысла :)
YI
В той формулировке, которую мы дали, задача действительно считается задачей классификации, так что лучше пойти по пути наибольшего сохранения смысла :)
у вас в принципе задача классификации. но какая-то залупа с метрикой. считать долю верных ответов — не круто
NK
На всякий случай прокомментирую.
Надо помнить, что в задачах машинного обучения качество лучших алгоритмов может быть близким, поэтому выбирая менее чувствительные метрики (в частности метрики принимающие бинаризованные предсказания), могут давать совпадающие результаты не небольших выборках
Надо помнить, что в задачах машинного обучения качество лучших алгоритмов может быть близким, поэтому выбирая менее чувствительные метрики (в частности метрики принимающие бинаризованные предсказания), могут давать совпадающие результаты не небольших выборках
NK
на*
YI
ID:270182525
На всякий случай прокомментирую.
Надо помнить, что в задачах машинного обучения качество лучших алгоритмов может быть близким, поэтому выбирая менее чувствительные метрики (в частности метрики принимающие бинаризованные предсказания), могут давать совпадающие результаты не небольших выборках
Надо помнить, что в задачах машинного обучения качество лучших алгоритмов может быть близким, поэтому выбирая менее чувствительные метрики (в частности метрики принимающие бинаризованные предсказания), могут давать совпадающие результаты не небольших выборках
Дима, сообщения можно редактировать
NK
Это также увеличивает "шумность" оценки моделей
АД
проще говоря - больше шанс, что будет 2 третьих места, 2 пятых и т.п.
АД
если брать 0 - 1)
NK
Дима, сообщения можно редактировать
Спасибо