K
ну это очень специфичная штука. Она в основном для сеток будет работать. И особенно при небольшом количестве данных. Как в МОА было, например
Size: a a a
2021 January 20
K
К удивлению, кстати, стек не всегда даёт. Я вот сейчас решаю одно соревнование. Вроде и корреляция предиктов для стека небольшая (0.97 и 0.88), и качество базовых моделей сопоставимо, а стек только все портит :/
SS
табулярный январь на кагле?
K
Неа. Там бленд как раз работает. Но я чисто для технических бенчмарков его решаю
K
Регрессия, без пропусков, анонимные данные — удобно что-то техническое потестить
SS
я как раз на табулярном январе заинтересовался стэкингом, т.к. только это позволяет улучшить, т.к. фичи извлечь там практически нереально
K
ну первое место что-то придумало, видать)
K
да, с фичами там тухло
SS
судя по лб - что-то прорывного там не придумали, идет возня за 5й знак после запятой
K
ну почему? первое место оторвалось
SS
в 4м знаке, ну такое
K
Sergey Salnikov
судя по лб - что-то прорывного там не придумали, идет возня за 5й знак после запятой
у меня для сингла 3 штуки завелось. Сингл дает где-то в районе 0.69670. Потом просто его бленжу и все
K
Sergey Salnikov
в 4м знаке, ну такое
ну для этого соревнования - это нормально)
K
у меня была "умная" идея, но NGBoost люто медленный оказался, поэтому забил
SS
там остается только тюнить и стекать. смотрел как-то структуру, задача похожа на предсказание z по (x, y) для перекошенного шарообразного облака точек, фич не наинженирить
K
ну есть еще что-то))
Ю
у меня была "умная" идея, но NGBoost люто медленный оказался, поэтому забил
Блин, тоже встрял с чем-то подобным. Только не на третьем, а на 40м месте😂
SS
а, только заметил, ты на 3м, круто!
SS
альфа закончилась, вернусь тоже туда
K
в целом идея был такая: давайте обучим GMM на таргете. Определим средние, стд и веса смеси. И обучим NGBoost на кастомном распределении, которым в нашем случае будет смесь. Но так как NGBoost не на плюсах написан, как остальные бусты, то это все это супермедленно