RB
но я не уверен что автоматически переобучать без контроля — хорошая идея. как минимум нужны тесты на модели, что они работают как ожидается
Size: a a a
2020 April 03
АЗ
Хорошо, спасибо
2020 April 04
ВВ
Подскажите как сделать так что бы ярги не различал регистр символов при парсинге?
SK
Подскажите как сделать так что бы ярги не различал регистр символов при парсинге?
Та же проблема. Я использую наташу NER на основе Yargy который должен был определять имена из текста. Но мой текст полность в нижнем регистре и он не работает. Что делать?
SK
всем привет. А есть какой то способ решения для стандартного примера с именами, Максим распознается а максим уже нет :(
Оказывается была такая проблема. Она решилась?
ВВ
Есть кто живой? 😀
V
Я для Наташи использовал костыль в виде установки всем существительным первую букву заглавной, через pymorphy2
Там вроде даже специальный тег есть для фио, но словарь там маленький
В итоге костыль работает, но иногда даёт ложные срабатывания)
Там вроде даже специальный тег есть для фио, но словарь там маленький
В итоге костыль работает, но иногда даёт ложные срабатывания)
SK
вы можете попробовать https://natasha.readthedocs.io/ru/latest/#simplenamesextractor
Я в целом доволен. Спасибо
ВВ
rule(
normalized('Ваня')
)
normalized('Ваня')
)
ВВ
ВВ
Или для словаря имен сущностей используйте не pipeline, а morph_pipeline.
morph_pipeline как раз работает без учета регистра
morph_pipeline как раз работает без учета регистра
ВВ
Сам спросил. Сам ответил 😁
2020 April 05
rr
Hie i m new graduate n i m searching for a job as a nlp or cv developer
АН
hi dude, ask for an invitation here, there is a separate work channel
Ю
Ребят, а как вы думаете, если прогнать текст через автокодировщик можно ли таким образом выделить ключевые слова? Я хочу сначала сверточную и потом автокодировщий
Ю
то есть снять слова с этого промежуточного слоя (который маленький по размеру)
YB
Ребят, а как вы думаете, если прогнать текст через автокодировщик можно ли таким образом выделить ключевые слова? Я хочу сначала сверточную и потом автокодировщий
attention можно добавить надо какой-нибудь, он тебе вполне выделит слова, влияющие на данное слово. или откуда ты собираешься ключевые слова получать?
Ю
ну я хз. мне надо из текста выделить ключевые слова. всё задание
YB
точнее, что на входе/выходе у автокодировщика?