дописывать после каждого токена синтаксическую часть его конллу разметки?

в смысле менять сам токен?

превращать текст кошка ест картошку в кошка 1 2 ест 2 0 картошку 3 2  



# text = кошка ест картошку
1  кошка  кошка  NOUN  _  Animacy=Anim|Case=Nom|Gender=Fem|Number=Sing  2  nsubj  _  TokenRange=0:5
2  ест  есть  VERB  _  Aspect=Imp|Mood=Ind|Number=Sing|Person=3|Tense=Pres|VerbForm=Fin|Voice=Act  0  root  _  TokenRange=6:9
3  картошку  картошка  NOUN  _  Animacy=Inan|Case=Acc|Gender=Fem|Number=Sing  2  obj  _  SpaceAfter=No|TokenRange=10:18

мм, спасибо за хинт!

а есть классический русский датасет на сентимент в отзывах в кине?

А чем готовым можно онтологических категорий к таблице англоязычных  научных абстрактов нарыть 2 источника - 1) биология, медицина, фарма 2) все науки включая (1) ?

И что сейчас самое точное ?

Всем привет, можете пожалуйста подсказать, как можно сравнить 2 текста на схожесть, если один текст переписан на основе другого, и нельзя сказать что они имеют одинаковую структуру, слова и т.п, но возможно имеют в себе одинаковые названия (например мероприятия, названия мест)

Прогнать через NER оба и сравнить результаты

Ок, спасибо

Привет!
Поделитесь, пожалуйста, опытом, как техника gradients accumulation (накопление градиента) работает в трансформерах.
Насколько сильно позволяет ускорить тренировку?

Всем привет! Сегодня (30 апреля 2021) в 20:00, в рамках очередного митапа Parsing Conf ( https://t.me/parsing_conf ) расскажу про методики, алгоритмы и архитектуру решения для обхода (парсинга) множества сайтов и извлечения ценной информации из них. Думаю, это будет интересно всем, у кого есть задачи сбора дата-сетов, проверки. Отдельно может быть интересно тем, кто парсит новости и строит бизнесы на этих данных. Доклад для тех, кто уже знает парсинг, но ещё не погружался в broad-crawl техники.

Ссылка в zoom (в 20:00 по Москве):
https://us02web.zoom.us/j/86560046252?pwd=eWVVOG0wSkIxNHJxbzVwUFc2NkMxUT09

А будет ли запись данного эфира?

после 22 мая, там у орга какие то обязательства, как я понял

Хорошо,спасибо

Друзья, а какие вы знаете качественные general purpose семантические парсеры для русского или английского языка?
Задача - превращать предложения в графовые представления, так чтобы эти представления были одинаковые (или хотя бы похожие) у предложений, одинаковых по смыслу.

а можно пример хотя бы некачественных?)

У графоманов сейчас эпидемия эмбедингов, так что ждать от них чего-нибудь путного не стоит … )

Какие-то семантические графчики есть в пулленти для русского.
Для английского есть стремноватый graphbrain и довольно приличная, но сложная amrlib - это из того, что быстро нагуглилось.

Есть презентация, сейчас пришлю ссылку)

https://yadi.sk/i/xdL6SN20aue8Ag - там много текста, основные идеи решений broad-crawl задач и задач авто-извлечения данных