TM
ударений правда не будет. но зато максимальный охват и официальность данных
Size: a a a
2021 November 02
SS
Ударение есть в wiktionary. Но его надо уметь парсить.
SM
BTW, мы опубликовали русскоязычную версию DALL-E: https://habr.com/ru/company/sberdevices/blog/586926/
AG
кто-то обучал рл агентов на эмбеддингах текстов ? есть какие-то примеры проектов у кого-нибудь или статьи ? хочется какой-то бейзлайн иметь и не шагать в пустоту
FF
Выглядит концептуально
SM
Ну тут не надо ждать таких сложных умений от XL-модельки :)
d
А как можно сохранить форматирование (rtf, html и т.п.) исходного текста, например, в задаче перевода?
В ситуации, когда разметка более-менее богатая и нарезать на кусочки, которые переводятся сами по себе - так себе идея.
В ситуации, когда разметка более-менее богатая и нарезать на кусочки, которые переводятся сами по себе - так себе идея.
ID
можно попробовать заводить специальные символы для “копирования” из src в tgt. Но я это применял для того, чтобы модель не переводила термины всякие с английского в какой-нибудь другой.
ID
типа там Apple is big software company. -> $Apple$ is big software company -> $Apple$ - большая софтверная компания
ID
для разметки можно похожее сделать
V
круто, уже запостил в нашем чате
ไ
здравствуйте
я залётная птица в обработке языка, так что проблема, описанная мной, может быть слишком простой.
у меня есть частично бессвязный набор символов(только буквы без пробелов), и мне нужно найти все осмысленные русские слова(неважно в какой морфологической форме). как это можно сделать?
я залётная птица в обработке языка, так что проблема, описанная мной, может быть слишком простой.
у меня есть частично бессвязный набор символов(только буквы без пробелов), и мне нужно найти все осмысленные русские слова(неважно в какой морфологической форме). как это можно сделать?
N
нигде :)))
N
ну в смысле да, сам список из открытых данных берётся, а дальше удачи вам с ударениями, там работы на очень много часов :)
PG
можно скачать из викидаты все русские города, а потом по привязке к вики статьям взять их ударения
N
оно вам все населённые пункты не покроет
N
я вам говорю как человек, который это всё ручками делал
PG
в оригинальной просьбе не было ВСЕХ населённых пунктов =)