Телеграмм чат группы natural_language_processing страница 1113

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Natural Language Processing

2573 membersпожаловаться на группу

2021 March 17

DD

David Dale in Natural Language Processing

А есть пример где это соответствие оттуда достаётся?

Например в Hugging Face есть transformer модель facebook/wmt19-en-ru для перевода. Из неё можно как-то?

У меня чё-то токенайзер от неё не скачивается.
Предлагаю пока что поштырить репозиторий https://github.com/jessevig/bertviz, он красивый

источник

20:32пожаловаться #1

DD

David Dale in Natural Language Processing

А есть пример где это соответствие оттуда достаётся?

Например в Hugging Face есть transformer модель facebook/wmt19-en-ru для перевода. Из неё можно как-то?

Итак, вот тебе блокнот с кросс-атеншном.
Надеюсь, это примерно то, что было нужно)
https://gist.github.com/avidale/85f6b3d294f9ff400ef76f2cc7ec559e

источник

21:10пожаловаться #2

A

Andrei in Natural Language Processing

Итак, вот тебе блокнот с кросс-атеншном.
Надеюсь, это примерно то, что было нужно)
https://gist.github.com/avidale/85f6b3d294f9ff400ef76f2cc7ec559e

топово!!! спасибо большое за блокнот! такое и хотел

источник

21:13пожаловаться #3

O

Olya in Natural Language Processing

привет! подскажите, пожалуйста, подходы, тулзы для language detection?

источник

23:42пожаловаться #4

DD

David Dale in Natural Language Processing

привет! подскажите, пожалуйста, подходы, тулзы для language detection?

fasttext справляется весьма прилично (при том, что модель весит 1мб)
https://fasttext.cc/blog/2017/10/02/blog-post.html
https://fasttext.cc/docs/en/language-identification.html

источник

23:43пожаловаться #5

O

Olya in Natural Language Processing

fasttext справляется весьма прилично (при том, что модель весит 1мб)
https://fasttext.cc/blog/2017/10/02/blog-post.html
https://fasttext.cc/docs/en/language-identification.html

спасибо! посмотрю

источник

23:45пожаловаться #6

2021 March 18

v

viktor in Natural Language Processing

привет! подскажите, пожалуйста, подходы, тулзы для language detection?

вот еще неплохие библиотеки
* https://github.com/aboSamoor/pycld2
* https://github.com/saffsd/langid.py

aboSamoor/pycld2

Contribute to aboSamoor/pycld2 development by creating an account on GitHub.

источник

00:11пожаловаться #7

AK

Aleksey Kulnevich in Natural Language Processing

Тестировал на основных европейских языках, фасттекст показывал результат выше, чем pycld2

источник

00:12пожаловаться #8

SM

Sergei Markoff in Natural Language Processing

Приходите послушать и пообсуждать в эту пятницу) Ссылка: https://bit.ly/3eP1UBw

источник

00:23пожаловаться #9

AA

Ann Akhmetova in Natural Language Processing

Sergei Markoff

Приходите послушать и пообсуждать в эту пятницу) Ссылка: https://bit.ly/3eP1UBw

А будет запись?

источник

00:59пожаловаться #10

SM

Sergei Markoff in Natural Language Processing

А будет запись?

Будет

источник

01:02пожаловаться #11

AA

Ann Akhmetova in Natural Language Processing

Ура, спасибо!)

источник

01:18пожаловаться #12

НС

Никита Сапунов... in Natural Language Processing

Всем привет. Никак не могу решить простую задачу с yargi. Хочу создать такой факт чтобы там было и исходное и нормализованное слово. Понятно, что это можно сделать как-то отдельно. Но как сделать нормально?

источник

19:52пожаловаться #13

2021 March 19

НК

Николай Карпенко... in Natural Language Processing

Итак, вот тебе блокнот с кросс-атеншном.
Надеюсь, это примерно то, что было нужно)
https://gist.github.com/avidale/85f6b3d294f9ff400ef76f2cc7ec559e

а можно эту модель как-то добучать небольшими датасетами?

источник

14:30пожаловаться #14

DD

David Dale in Natural Language Processing

Николай Карпенко

а можно эту модель как-то добучать небольшими датасетами?

Конечно, можно.
Но я сам не пробовал, и какое получится качество - не знаю.

источник

14:30пожаловаться #15

НК

Николай Карпенко... in Natural Language Processing

Конечно, можно.
Но я сам не пробовал, и какое получится качество - не знаю.

а какими еще моделями можно переводить хорошо?

источник

14:31пожаловаться #16

DD

David Dale in Natural Language Processing

Николай Карпенко

а какими еще моделями можно переводить хорошо?

https://paperswithcode.com/task/machine-translation

источник

14:33пожаловаться #17

D

Dmitry in Natural Language Processing

Николай Карпенко

а какими еще моделями можно переводить хорошо?

машинный перевод? opus-mt-en-ru / ru-en

источник

14:37пожаловаться #18

М

Михаил in Natural Language Processing

Всем привет. Хочу обучить neuralcoref для русского, базируясь на https://github.com/buriy/spacy-ru .
(Spacy 3.0, насколько я понял не подходит)
Есть ли те, кому это удалось сделать?
Есть ли пример датасета для обучения? (В pipeline для английского используется обработанная версия OntoNotes, и не понятен окончательный формат датасета)

buriy/spacy-ru

Russian language models for spaCy. Contribute to buriy/spacy-ru development by creating an account on GitHub.

источник

22:02пожаловаться #19

IK

Igor Kucherevsky in Natural Language Processing

привет! подскажите, пожалуйста, подходы, тулзы для language detection?

Нужно определить какой язык?

источник

22:08пожаловаться #20