Sounds like slotfilling or ner task

Try yargy parser or ner (spacy, deeppavlov)

yargy is for russian language, right?

Здравствуйте! В каггле от авито были вроде

Ищу стажировку по НЛП, можно неоплачиваемую на 3-4 часа в день. Опыта работы в данном направлении нет, есть сертификат прохождения курса на coursera от НИУ ВШЭ и мелкие toy projects: классификация, сбор и preprocessing текста.

Ouch, I forgot that yargy only for russian language :(

Ребята, а есть какая-нибудь подборка видео или подкастов про диалоговые системы?) Мне нужно разобраться в целом, какие технологии сейчас используются: от того, какие чат-бот платформы есть, до разбора применимости алгоритмов и моделей сетей, лежащих в основе?) Где читать - знаю ...а есть такое же, только "послушать"? Видео я тоже слушаю. Буду дико признателен. Помогите, пожалуйста :)

П.с. если там будет и про распознавание речи, speech2text или анализ голоса (без перевода в текст)  - вообще круто)

Rasa, возможно, неплохой вариант

может кто поможет, как мне взять только спаны и типы NER, мне не нужна визуализация

Вот тут почитать можно - https://habr.com/ru/post/516098/

Если на английском тут сгодится - моя вчерашняя лекция про InterpretableNLP https://www.youtube.com/watch?v=FzKMtNILmDk (если кому будет интересно, запишу русский трек чуть позже)

спасиб!, мне нужен был просто доступ к индексам и типам

не пойму в чём проблема с лемматизацией, пишет 'NoneType' object has no attribute 'keys’, хотя делаю всё по примеру

Надо запустить morph_tagger перед lemmatize, смотрите пример

🙏

Всем привет) Я сейчас занимаюсь созданием qa-бота. Есть датасет с ~300к пар вопросов и ответов. Данные достаточно чистые. Пробую использовать модель transformer, однако бот при тесте просто выдаёт набор несвязанных слов. Хотел бы попросить совета, в каком направлении двигаться, чтобы улучшить модель, где искать информацию по этой теме?

Сначала рассказать о текущей модели подробно - код показать, какая библиотека используется, размер модели и так далее.