YB
не, я подумал, ты про человека/агентство говоришь.
Size: a a a
2020 June 02
YB
в целом, переводчики сейчас не сильно отличаются. что deepl , что гугл. было где-то сравнение на наборе языков, можешь поискать.
YB
а сколько там предложений в корпусе нужно перевести?
YB
десятки, сотни тысяч, миллионы?
YB
D(
а сколько там предложений в корпусе нужно перевести?
Порядка 10M символов, то бишь 100К предложений.
YB
Порядка 10M символов, то бишь 100К предложений.
Text translation (NMT general models) $20 per million characters
всего что-то порядка $200 у гугла, получается.
или можно брать проксики + бесплатный гугл/deepl , они же дают пользователям что-то переводить без регистрации.
всего что-то порядка $200 у гугла, получается.
или можно брать проксики + бесплатный гугл/deepl , они же дают пользователям что-то переводить без регистрации.
YB
могу вложиться частично (или по согласованию с работодателем, даже полностью), и сделаем открытый датасет. штука очень полезная для всех русских чат-ботов.
D(
могу вложиться частично (или по согласованию с работодателем, даже полностью), и сделаем открытый датасет. штука очень полезная для всех русских чат-ботов.
Слушай, было бы клёво, если бы удалось скинуться.
Там, конечно, диалоги не то чтобы очень глубокомысленные (собирались на Турке). Типа такого:
Там, конечно, диалоги не то чтобы очень глубокомысленные (собирались на Турке). Типа такого:
- Got a bag of candy I'm polishing off. Diabetes be damnedИнтересно, что Яндекс в веб-версии переводит этот текст абсолютно адекватно, а вот в API походу сидит более дешёвая моделька (возможно, даже фразовая а не нейронная), и выдаёт какой-то тупняк.
- uh oh! Have you checked your sugar lately?
- I haven't gotten a physical in over a year.
- After that bag of candy, you may want to!
DK
Слушай, было бы клёво, если бы удалось скинуться.
Там, конечно, диалоги не то чтобы очень глубокомысленные (собирались на Турке). Типа такого:
Там, конечно, диалоги не то чтобы очень глубокомысленные (собирались на Турке). Типа такого:
- Got a bag of candy I'm polishing off. Diabetes be damnedИнтересно, что Яндекс в веб-версии переводит этот текст абсолютно адекватно, а вот в API походу сидит более дешёвая моделька (возможно, даже фразовая а не нейронная), и выдаёт какой-то тупняк.
- uh oh! Have you checked your sugar lately?
- I haven't gotten a physical in over a year.
- After that bag of candy, you may want to!
Так это ж стандартная тема, со спеллером та же история — апи и внутренняя разработка отличаются качеством на порядок
YB
Слушай, было бы клёво, если бы удалось скинуться.
Там, конечно, диалоги не то чтобы очень глубокомысленные (собирались на Турке). Типа такого:
Там, конечно, диалоги не то чтобы очень глубокомысленные (собирались на Турке). Типа такого:
- Got a bag of candy I'm polishing off. Diabetes be damnedИнтересно, что Яндекс в веб-версии переводит этот текст абсолютно адекватно, а вот в API походу сидит более дешёвая моделька (возможно, даже фразовая а не нейронная), и выдаёт какой-то тупняк.
- uh oh! Have you checked your sugar lately?
- I haven't gotten a physical in over a year.
- After that bag of candy, you may want to!
меня тут беспокоит только то, как правильно стороны определять. если там всегда 4 фразы от двух сторон поочерёдно говорящих, то ок. это можно использовать тогда для модели.
D(
меня тут беспокоит только то, как правильно стороны определять. если там всегда 4 фразы от двух сторон поочерёдно говорящих, то ок. это можно использовать тогда для модели.
Там табличка на самом деле с размеченными speaker_id и эмоцией, которую первый спикер (рассказчик) должен изображать. А второй спикер (слушатель) должен эмпатировать)
YB
ну если разметка по ролям есть, то моделька должна неплохая получиться из этого.
V
тут недавно 🤗 выпустила модель
трогал для перевода en->ru
неплохо переводит (понятное дело что сразу длинное предложение не кушает. лучше подавать < 1024 символов)
ну и по скорости оч даже хорошо
Helsinki-NLP/opus-mt-{src}-{tgt}трогал для перевода en->ru
неплохо переводит (понятное дело что сразу длинное предложение не кушает. лучше подавать < 1024 символов)
ну и по скорости оч даже хорошо
2020 June 03
YB
тут недавно 🤗 выпустила модель
трогал для перевода en->ru
неплохо переводит (понятное дело что сразу длинное предложение не кушает. лучше подавать < 1024 символов)
ну и по скорости оч даже хорошо
Helsinki-NLP/opus-mt-{src}-{tgt}трогал для перевода en->ru
неплохо переводит (понятное дело что сразу длинное предложение не кушает. лучше подавать < 1024 символов)
ну и по скорости оч даже хорошо
Opus -- корпус субтитров? Он же небольшой
AL
Opus -- корпус субтитров? Он же небольшой
Коллекция из нескольких (сабы, WMT, UN, etc)
AK
ребята, кроме tesseract ocr что-то еще есть? что-то у меня оно плохие результаты дает
MM
ребята, кроме tesseract ocr что-то еще есть? что-то у меня оно плохие результаты дает
Поищите в этом чате по слову Sharepoint
AK
Поищите в этом чате по слову Sharepoint
спасибо за подсказку