IK
Возможно, Loss или Optimizer остались на cpu?
Ну там есть разбиения, энтропия по шеннону ,которая считается как раз из вероятностей ( мб в ту сторону надо копать)
Тут не отвечу
Size: a a a
2021 August 22
IK
по тому, какие обьекты попадают в лист дерева. Если во время обучения попало в лист из тренировочной выборки 11 обьектов класса "0" и 2 обьект класса "1", тогда в этом листе вероятность класса "1" 2/13
AK
ааа, прикольно!
AK
оон как-то так спросил, не припомню уже. То ли почему не линейная, то ли почему не ступенька. Вот не запомнил
IK
то есть, в начале дерева эти вероятности близкие к 0.5, по мере построения дерева мы стараемся доводить одну из этих вероятностей до единицы
MО
Нет. Ежели доводит до 1 то это будет переобученное дерево. Вообще используют лес а не дерево.
IK
ну если не ограничивать глубину построения дерева, то так и будет
IK
То что деревья потом срезают - это уже другой вопрос
MО
Если срезать то у меня из опыта получается что нет разницы устремлять центральные ноды к 1 или же брать их случайным образом.
MО
Все результаты определяют только листовые ноды.
IK
А зачем нужны листовые ноды с вероятностями 0.5? Они же ничего не разделяют, а надо бы чтобы один из классов там преобладал
MО
Когда деревья подрезают там уже вероятность отличная от 0,5 но результат даёт не само дерево а лес.
А вот ежели не подрезать то тогда стоит устремлять но у вас будет результат всегда 100 %. На примере ты ему кажешь кошку а дерево тебе говорит что это курица со 100% качеством.
А вот ежели не подрезать то тогда стоит устремлять но у вас будет результат всегда 100 %. На примере ты ему кажешь кошку а дерево тебе говорит что это курица со 100% качеством.
IK
Так известно, что единичное дерево есть слабым алгоритмом)
IK
Конечно, как правило леса и бустинги оказываются сильнее
AK
а можно спросить, как потом деревья в лес ассаблируются. Вот есть у нас фича которая например попала в два разных дерева и дала разны вероятности в нодах и что потом
D
все деревья отвечают и ответ усредняется
D
лучше будет просмотреть еще раз курс от ОДС по мл,там вроде на все ваши вопросы есть ответы, кроме метрик
AK
ага, я по нему и учился. Похоже пора второй итерации
MО
Пока что я использую усреднение.