SМ
Size: a a a
2020 November 08
d
Меньше каггл кернелы
Это мой код, а не копипаст
SМ
SМ
Ща покажу как в тф
d
Я что-то не видел на кагле, чтобы красивенько с pytorch lighting
d
Размерность скажи после своего mean
батч на hidden size берта?
батч на hidden size берта?
SМ
Размерность скажи после своего mean
батч на hidden size берта?
батч на hidden size берта?
Да
SМ
К на 768
SМ
Каждый сэмпл сентенс вектор
SМ
Сложение по строчно
SМ
Получается что среднее внутри столбца
SМ
Макс пуллинг в тф идет вдоль столбца
SМ
Не по строке
SМ
Ну можно ось указать
SМ
Конкретно
SМ
Если среднее по векторам фич слов понятно это сентенс вектор
SМ
То максимум среди всех семплов врутри фичи это фиг знает что
d
Я поэкспериментирую с убиранием как-нибудь
Сколько скор давал берт с пулингом правильным?
Сколько скор давал берт с пулингом правильным?