SP
Natalia
и да, для любой модели нейросетевого переводчика нужен миллион предложений или больше
Громкое утверждение.
Size: a a a
2020 August 09
N
ну если вы хотите, чтобы он нормально переводил, то да
N
а если не хотите, то, конечно, громкое
N
пойду я отсюда, действительно
N
Natalia
есть какой-то ирландский проект, собирающий сайты на разных языках, но я вечно забываю название его
я знаю этот сайт кстати, но это не то
N
мне бы корпус 1к1 предложений собрать, пока 3к максимум найти могу
N
но с этими данными пока каша
N
ой ну камон, даже Библия раза в два больше
N
якутский?
N
Natalia
якутский?
да, 3к предложений?
N
мб мб
N
в основном текста переведены вольно, но которые я видел
N
помимо приказов
N
ну не знаю, звучит очень забавно. один из наиболее живых малых языков России, а вы говорите, 3к наскрести сложно
N
а думаете, в большинстве открытых параллельных корпусов мало вольно переведённых предложений? :)
N
Natalia
ну не знаю, звучит очень забавно. один из наиболее живых малых языков России, а вы говорите, 3к наскрести сложно
в силу того, что клавиатура появилась 4-5 лет назад у большенства, последние 30 лет писали по разному
N
например это слово все пишут как муьелее5и, русским транслитом
N
из-за этого язык сильно поменялся
OS
Вместо того, чтобы писать кучу сложной логики, в планах сделать тупо транслейт моих текстов в русский и Наташей проходиться)) ну или любой другой готовый инструмент для русского языка юзать.
если конечная цель — нер, то возможно, что 90% именованных сущностей — это просто заимстования из русского и их можно выцепить регулярками?)
ну + имена/геотеги нечётко на основе бд
ну + имена/геотеги нечётко на основе бд