AK
а зачем тогда Наташу брать?) солидный проигрыш диппавлову, и по сути ноздря в ноздрю с удпайпом в зависимости от сегмента
Slovnet Syntax оптимизирован для новостей. Имеет смысл если этот домен. Плюс высокая скорость и поддержка Pypy.
Size: a a a
2020 June 04
DK
скорость удпайпа только в вашей табличке вызывает вопросы, у меня совсем другие цифры получались, интересно
DK
у меня получалось порядка 300-350 в секунду
AK
Там удпайп поднимался как веб-сервис. Может быть из-за этого. Расходы на сериализацию и всё такое. Впрочем slovnet тоже как веб-сервис.
AK
У удпайп нет батч-режима?
DK
есть, вроде
я дергал питонской обвязкой, она у меня в продакшне крутится, там на сингл-моуд эти 3 мс
я дергал питонской обвязкой, она у меня в продакшне крутится, там на сингл-моуд эти 3 мс
DK
правда я дергаю с предобработанной токенизацией и морфологией, это чисто время парсера
но не думаю все равно, что там просадка x7 из-за лишних модулей, локально работает довольно быстро и целым пайплайном
но не думаю все равно, что там просадка x7 из-за лишних модулей, локально работает довольно быстро и целым пайплайном
AK
Ещё может быть что у вас просто проц лучше. Там используется старый i5
DK
Ещё может быть что у вас просто проц лучше. Там используется старый i5
я гонял на аймаке кажется в свое время, это правда
для сравнения дельты, если что, я еще айпавлова там же гонял, но на цпу -- можно просто посмотреть, какая дельта получится между удпайпом и павловым на цпу
для сравнения дельты, если что, я еще айпавлова там же гонял, но на цпу -- можно просто посмотреть, какая дельта получится между удпайпом и павловым на цпу
2020 June 05
V
Добрый день
Можно такой нубский вопрос, разметка текстов - это annotation или как-то еще бывает? Marking или markup может быть?
Можно такой нубский вопрос, разметка текстов - это annotation или как-то еще бывает? Marking или markup может быть?
DP
Кажется, что наиболее общее слово labeling, но может варьироваться от конкретной задачи (разметка классов, выделение сущностей, аннотирования)
NS
Открыли регистрацию на Диалог 2020, проходить будет в сети http://www.dialog-21.ru/registration/
D
добрый вечер, кто пробовал разворачивать ru_transformers?
V
Подскажите пожалуйста, где найти полный список POS тегов, которые может вернуть RNNMorph? Судя по коду теги конвертируются в UD1.4, но нигде не могу найти список этих тегов, везде только UD2.0...
https://github.com/IlyaGusev/rnnmorph/blob/master/rnnmorph/predictor.py#L76
https://github.com/IlyaGusev/rnnmorph/blob/master/rnnmorph/predictor.py#L76
V
Вероятно, я нашёл что искал в материалах дорожки по морфологическому анализу "Диалога-2017": https://github.com/dialogue-evaluation/morphoRuEval-2017/blob/master/morphostandard
V
Кажется, что наиболее общее слово labeling, но может варьироваться от конкретной задачи (разметка классов, выделение сущностей, аннотирования)
Спасибо!
2020 June 06
AS
Кто-то сталкивался с генерацией длинных текстов (3000 символов) без потери смысла? Тобеж если задали сгенерировать текст про ноутбук, в начале и в конце будет тематика ноутбуков, а не сначала 4 предложения про ноутбук а пятое про Николая II.
V
Кто-то сталкивался с генерацией длинных текстов (3000 символов) без потери смысла? Тобеж если задали сгенерировать текст про ноутбук, в начале и в конце будет тематика ноутбуков, а не сначала 4 предложения про ноутбук а пятое про Николая II.
Есть мод gpt он управляется: задаётся начало и концовка и тем самым модель не скатывается в треш.
AB
На gpt3 уже кто то пробовал?