В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Natural Language Processing

3198 membersпожаловаться на группу
2021 September 30

МЕ

Максим Ермаков... in Natural Language Processing
Всем привет! Подскажите, как в spaCy можно заменить текст внутри entity? Или просто заменить кусок текста внтури дока?

Вот тут Ines Montani в очередной раз подчёркивает недеструктивность обработки в spaCy 😐
Stack Overflow
How to modify spacy.tokens.doc.Doc tokens with pipeline components in SpaCy
I'm using SpaCy to pre-process some data. However, I'm stuck on how to modify the content of the spacy.tokens.doc.Doc class.

For example, here:

npc = spacy.load("pt")
def pre_process_text(doc) -&...
источник
14:37пожаловаться#1

AS

Artem Sergeev in Natural Language Processing
добрый день
а ведь у меня прямо похожий вопрос был
ну в смысле я тут заметно продвинулся, но результат в реальности пока сильно далёк от идеала

и просто "дотюнить" тут не помогает, тем более small модель

в чате есть обсуждение на этот счёт. А мне было бы интересно пообщаться.

Причём на первом этапе у меня не условный Толстой, а вполне реальный :)
источник
16:25пожаловаться#2

A

Aron in Natural Language Processing
Доброго времени суток! Как тут относятся к размещению ссылок на фриланс биржу? Ищу исполнителя.
источник
18:25пожаловаться#3

A

Aron in Natural Language Processing
Видимо рискну.
https://freelance.habr.com/tasks/391323
Habr
Задача обработки естественного языка, консультация по парсеру
Для социологических исследований, нужно сделать инструмент позволяющий парсить мнения людей из массива данных. Например, это могут быть мнения об организации, событии или персоне.  В целом под задачи подходит tomita-parser, но готовы рассмотреть другие инструменты.    Вместо ТЗ    Тестовые данные есть, сейчас в виде таблицы. В дальнейшем планируется переход на SQL    Дополнительна информация для понимания задачи во вложении.    Во вложении есть файл с таблицей. В первой колонке «условия»...
источник
18:29пожаловаться#4

SS

Sergey Sikorskiy in Natural Language Processing
Может лучше создать отдельный чат для работы/бизнеса, а здесь обсуждать только софт и теорию?
источник
18:32пожаловаться#5

AP

Arsen Plus in Natural Language Processing
Добрый вечер всем! Немного глупый вопрос сейчас последует:

Я же могу потюнить ru_core_news_lg из SpaCy (ner-компоненту) на своих данных, следуя той процедуре, что описана в мануалах SpaCy?

https://spacy.io/usage/training
Training Pipelines & Models
Training Pipelines & Models · spaCy Usage Documentation
Train and update components on your own data and integrate custom models
источник
20:52пожаловаться#6

🐙

🐙 in Natural Language Processing
Да, можете, там статистическая модель учится.
источник
22:04пожаловаться#7

AP

Arsen Plus in Natural Language Processing
Спасибо
источник
22:05пожаловаться#8

MA

Mark Adamenko in Natural Language Processing
Коллеги, приветствую! Буду благодарен за помощь! Есть несколько датасетов -часть в csv, часть в json (json разной структуры - разная степень вложенности, разные имена свойств, хотя по факту могут быть эквивалентными). Как подступиться к задаче?
источник
22:45пожаловаться#9

MA

Mark Adamenko in Natural Language Processing
А - самое главное - надо объединить с одной структурой, свойства смержить.
источник
22:45пожаловаться#10
2021 October 01

OS

Oleg Serikov in Natural Language Processing
привет! а есть тьюториал с best practices для построения корпуса с быстрым поиском?

в моей голове это "документация lucene/elk" но звучит как высокий порог вхождения
источник
12:39пожаловаться#11

A

Andrey in Natural Language Processing
посмотрите weviate, milvus
источник
12:47пожаловаться#12

NK

Nikolay Karelin in Natural Language Processing
Milvus - Для поиска по эмбеддингам, на уверен, что про это спрашивали
источник
12:50пожаловаться#13

OS

Oleg Serikov in Natural Language Processing
скорее для кастомного трибанка не в юди
источник
12:51пожаловаться#14

A

Andrey in Natural Language Processing
ничего не понял, но очень интересно.

эластик не такой уж сложный, если что.
источник
12:53пожаловаться#15

FF

Futorio Franklin in Natural Language Processing
Там разве поиск по векторам не в xpack версия?
источник
12:54пожаловаться#16

FF

Futorio Franklin in Natural Language Processing
для ann поиск есть vearch, но там всё плохо с документацией
источник
12:54пожаловаться#17

A

Andrey in Natural Language Processing
нет. я юзаю cosine similarity на бесплатном без дополнений
источник
12:55пожаловаться#18

FF

Futorio Franklin in Natural Language Processing
Круто. И как по скорости?
источник
12:55пожаловаться#19

A

Andrey in Natural Language Processing
https://www.elastic.co/blog/text-similarity-search-with-vectors-in-elasticsearch

отдельно не бенчмаркал, но вообще претензий нет
Elastic Blog
Text similarity search in Elasticsearch using vector fields
The Elasticsearch 7.3 release brings support for using vectors in document scoring. This post explores how text embeddings and vector fields can be used to support similarity search.
источник
12:56пожаловаться#20