N
если честно, я бы всё равно сначала вообще позапускала имеющиеся уже модели хотя бы для парочки предложений и посмотрела, что выходит
Size: a a a
2021 April 14
AY
понял, спасибо)
A
Не надо так
VM
заменить цифры какими-нибудь двух-символьными кодами -- думаю, расстояние в них увеличится вдвое
AY
Решил идти подходом bag of words
Матрица получилась примерно
4.2млн Х 1млн
Т.е. на входе сети будет 1млн нейронов и на выходе примерно столько же
Кто-то вообще обучал такие сети или это заведомо гиблый подход?
Матрица получилась примерно
4.2млн Х 1млн
Т.е. на входе сети будет 1млн нейронов и на выходе примерно столько же
Кто-то вообще обучал такие сети или это заведомо гиблый подход?
AC
Вакансия НЛП для графов знаний , Сбер : https://t.me/sberlogajobs/79
A
Ради интереса посчитай сколько эта матрица занимает памяти 😊
AY
Если делать .toarray(), то он пытается аллокировать 3тб))
SМ
Есть ж спарс слои
SМ
И спарс матрицы
AY
Ну да
Но это же все равно матрица
Строки х слова
Но это же все равно матрица
Строки х слова
A
Тогда представь сколько будет занимать сетка ))
MA
Ребята, есть задача по multi class classification, на входе текст и нужно определить эмоции по этому тексту. Решил использовать BERT Classifier от deep Pavlov. Нужен совет, кто-нибудь уже делал подобное? может есть что-то получше что я упускаю.
OS
а русские — это кириллицей?
MK
Питон, C# и прочие поддерживают имена переменных в Unicode
OS
ага! мои пальцы не поддерживают такое количество смен раскладок)
OS
или это уже после кодирования инструментами рефакторинга делалось?
OS
или есть лайфхак?
тоже хочу попробовать
тоже хочу попробовать
MK
У меня поддерживают, так что лайфхака нет, но я пока для себя не решил, что буду всегда делать идентификаторы на русском.