Телеграмм чат группы datasciencecourse страница 3608

2020 June 24

АГ

Артём Глазунов... in Machine learning

И рассказывают про другие способы регуляризации

источник

14:58пожаловаться #1

АГ

Артём Глазунов... in Machine learning

K-S

Только там надо не просто среднее считать, а гармоническое среднее

При усреднении средних по внутреннему циклу? Или вообще?

источник

14:59пожаловаться #2

K

K-S in Machine learning

Когда вы считаете среднее для категории, оно должно быть гармоническим. Иначе если категория редкая, то обычные средние не будут отображать действительность

источник

15:00пожаловаться #3

AO

Alex Ololo in Machine learning

а если я групфолд использую? должно помочь. не?

источник

15:00пожаловаться #4

K

K-S in Machine learning

Но на практике таргет энкодингом уже, конечно, давно ничего не выиграть :/ он у меня даже локально как-то неособо даёт. А делать проблемнее

источник

15:01пожаловаться #5

K

K-S in Machine learning

K-S

Но на практике таргет энкодингом уже, конечно, давно ничего не выиграть :/ он у меня даже локально как-то неособо даёт. А делать проблемнее

Речь о бустах естественно

источник

15:02пожаловаться #6

АГ

Артём Глазунов... in Machine learning

K-S

Но на практике таргет энкодингом уже, конечно, давно ничего не выиграть :/ он у меня даже локально как-то неособо даёт. А делать проблемнее

Так есть ли ещё что-то? Или вы про другие реализации нахождения статистик(woe, loo, diffirence), типа они работают лучше ?

источник

15:04пожаловаться #7

АГ

Артём Глазунов... in Machine learning

Или о самом алгоритме бустинга с использованием любого энкодера?

источник

15:04пожаловаться #8

K

K-S in Machine learning

Артём Глазунов

Так есть ли ещё что-то? Или вы про другие реализации нахождения статистик(woe, loo, diffirence), типа они работают лучше ?

Лейбл энкодинг + count encoding

источник

15:04пожаловаться #9

K

K-S in Machine learning

И в целом идея генерации разных всяких статистик по категориям хорошая. Я ее чаще даже использую

источник

15:06пожаловаться #10

АГ

Артём Глазунов... in Machine learning

Каунт энкодинг это категории заменять частотами их появления?

источник

15:06пожаловаться #11

АГ

Артём Глазунов... in Machine learning

Там тоже, по идее, кросс валидация такая ведь нужна?

источник

15:06пожаловаться #12

K

K-S in Machine learning

Угу

источник

15:06пожаловаться #13

K

K-S in Machine learning

Артём Глазунов

Там тоже, по идее, кросс валидация такая ведь нужна?

Если для работы — да, но если для соревнований, то нет))

источник

15:07пожаловаться #14

K

K-S in Machine learning

Артём Глазунов

Там тоже, по идее, кросс валидация такая ведь нужна?

Ну и не совсем такая. Там достаточно просто все статистики считать внутри фолдов

источник

15:08пожаловаться #15

АГ

Артём Глазунов... in Machine learning

K-S

Если для работы — да, но если для соревнований, то нет))

А как уберечься от подстраивания на обучении при формировании саба, ведь распределение частот в об. выборке будет случайным, хорошо бы делением тоже заполнить? ... Или лайфхак ещё есть?

источник

15:10пожаловаться #16

АГ

Артём Глазунов... in Machine learning

K-S

Ну и не совсем такая. Там достаточно просто все статистики считать внутри фолдов

То есть одинарное деление

источник

15:10пожаловаться #17

K

K-S in Machine learning

Артём Глазунов

А как уберечься от подстраивания на обучении при формировании саба, ведь распределение частот в об. выборке будет случайным, хорошо бы делением тоже заполнить? ... Или лайфхак ещё есть?

Все статистики считаешь на объединённых трейн+тест

источник

15:10пожаловаться #18

АГ

Артём Глазунов... in Machine learning

K-S

Все статистики считаешь на объединённых трейн+тест

Неплохо)

источник

15:11пожаловаться #19

K

K-S in Machine learning

Тем самым ты и распределения подгоняешь под тест частично

источник

15:11пожаловаться #20