T
USE/SentenceBert там всякие
Size: a a a
2020 November 22
T
Всем доброго времени суток. Сейчас появилась проблема: сравнить два текста по содержания. Например, он написал текст за урок, и, он успел написать текст за урок, идентичны. Я думаю, что надо как-то CNN строить с выходом 1 или 0, но даже не знаю с какой стороны подходить... Может кто подскажет. Заранее спасибо.
тебе нужно тексты по смыслу сравнивать или там должны быть одинаковые словосочетания, как у тебя в примере?
АС
Именно по смыслу
АС
Чтобы фразы говорили об одном и том же
d
Sentence Bert мне нра
T
тогда можно попробовать получать эмбеддинги текстов опять же каким-нибудь SentenceBERT/USE/LASER и потом сравнивать их по косинусной близости
T
если близость выше какого-то порога, то тексты похожи по смыслу
ну это в идеале)))
ну это в идеале)))
АС
Благодарю
D
в сверточную сеть приходят массивы 1000*1000*10, как определить какие из 10 матриц 1000*1000 в таких массивах вносят больший вклад в результат?
T
Можно попробовать какие-нибудь integrated gradients заюзать и усреднить веса по матрицам
2020 November 23
EZ
Поясните дураку, code-only на кагле значит что оно должно прямо в сабмите тренироваться?
SМ
Поясните дураку, code-only на кагле значит что оно должно прямо в сабмите тренироваться?
Ага
DR
разве предобученные модели нельзя?
SМ
разве предобученные модели нельзя?
Смотря что в правилах написано
SМ
Вообще можно и предобученные туда залить
SМ
Главное в ограничения влезать
SМ
По времени и памяти
DR
Ну вот я тоже помню, что от правил вроде конкретного соревнования зависит, где-то тренировать самому можно, где-то прямо в сабмите надо
GE
Ну вот я тоже помню, что от правил вроде конкретного соревнования зависит, где-то тренировать самому можно, где-то прямо в сабмите надо
"code-only" - это значит сабмитишь ноут. В нем тренировка и предикт. Разве нет?
EZ
Смотря что в правилах написано
Если написано что надо публичные предобученные только