При крауленге веб страницы часто два слова сливаются в одно н выходе

Спасибо за ответ, @Fant1k43 @dzhkn42  
Заметил, что изначально все написано правильно, убивает букву Й расстановка знаков препинания по репо  https://github.com/Lesha17/Punctuation
Хд воскресил вручную

Сейчас подумал, листал этот чат, но не нашел ничего лучше данного репозитория для получения интонационных знаков препинания.
Может пролистал, и кто-нибудь уже сравнивал данный репо с другими имеющимися? (именно, где расставляются ?!.,- на необработанном тексте из asr)
Есть ли лучше?

Я правильно понял, что данная модель: https://github.com/sviperm/neuro-comma , - расставляет только точки и запятые? (Судя по статье)
Причем точки только если массив предложений подать на вход? (Судя по примеру в репо)

Просто https://github.com/Lesha17/Punctuation не слишком точно, мне показалось, расставляет запятые. Про скобки - вообще никак, но скобки не важно.
Может есть модель для проверки и исправления пунктуации? Или правильно будет подключить https://github.com/sviperm/neuro-comma (раз она вроде лучшая в плане расстановки запятых) и если первая модель выдаст предложение, где нет "!?", то очистить текст от запятых и отправить на проверку(расстановку) запятых neiro-comma?

При этом, конечно, качество распознанного текста не всегда хорошее. Иногда частицы пропущены или склонение слова неверное. Сможет neiro-comma разобраться, как думаете?...

Не заменять спецсимвол неразрывного пробела на ничего, а заменять его на пробел.

Или между кусками текстов из разных тегов не забывать пробел добавлять, а потом заменить пачкой повторяющиеся пробелы на один.

Короче, косяки типовые в парсере страницы исправить, а не ломать им и потом чинить

Можно ли считать AGI multitask transformer? 🤡

подскажите либы с синонимами для заданного русского слова?

А нужна либа прям иди свой лесапед?)

Можно попробовать ru wordnet

а вот не нашёл такого

Я например беру словарь русских синонимов там их 40к пар

а можно ссылку или как гуглить? не могу найти =(

И сначала пайморфи в норм форму, метчу и инфлект делаю по сопряжению

На словарь?

а вы про это же?
https://wiki-ru-wordnet.readthedocs.io/en/latest/

мне показалось тут мало синонимов

Одно и тоже?

вроде да