Size: a a a

NLP_RU - Natural Language Processing & Text Mining

2020 March 11

C

Cucusenok in NLP_RU - Natural Language Processing & Text Mining
Новиков Дмитрий
С селениумом не работал, да и долго он будет парсить, но мысли были. Как выше написали, мне же исходник нужен, а не визуальная часть, тут просто Ctrl+a не подойдёт.
Так как я не программист, соглашусь, что наверное моё решение не очень правильное. Буду допиливать, спасибо за советы.
Ему не надо парсить...
источник

DB

Denis Bondar in NLP_RU - Natural Language Processing & Text Mining
Новиков Дмитрий
Всем привет! Подскажите есть какая то готовая хорошая библиотека, которая отделяет текст от исходного кода страницы удаляя скрипты и html код? Я регулярной удаляю все html и все что в скриптах, но все равно артефакты какие то остаются. Желательно конечно, чтобы библиотека отделяла ссылки от текста также.
Boilerpipe
источник
2020 March 17

К

Константин in NLP_RU - Natural Language Processing & Text Mining
всем привет.
есть ли способ в Natasha достать родитель распознанного объекта? в данном примере это название товара
источник

М

Михаил in NLP_RU - Natural Language Processing & Text Mining
Ммм там же вроде просто регулярки не?
источник

К

Константин in NLP_RU - Natural Language Processing & Text Mining
Михаил
Ммм там же вроде просто регулярки не?
да) почитал внимательнее там только регулярки. Значит для семантического анализа связей мне нужно что то другое.
есть какие-либо открытые решения для парсинга текстов  и выявления в них связки "товары и цен на них"?
источник

М

Михаил in NLP_RU - Natural Language Processing & Text Mining
Ничего готового из коробки мне не попадалось, везде надо писать свои правила.
источник

э

эдуард in NLP_RU - Natural Language Processing & Text Mining
Константин
да) почитал внимательнее там только регулярки. Значит для семантического анализа связей мне нужно что то другое.
есть какие-либо открытые решения для парсинга текстов  и выявления в них связки "товары и цен на них"?
wit.ai может помочь
источник
2020 March 20

P

Pi in NLP_RU - Natural Language Processing & Text Mining
всем привет, стоит задача классификации текста по наличию в ней контактной информации(телефон, телега и тд). проблема в том, что контактная инфа зачастую изменена( цифры написаны буквами, или написаны смайлами и тд). но чаще всего между цифрами телефона просто стоят неинформативные символы. была идея написать конкретно под номера телефонов регулярки, но, может быть, проблема известна и существуют простые и стандартные методы ее решения?
источник
2020 March 22

E

Elena in NLP_RU - Natural Language Processing & Text Mining
надо именно классифицировать, есть контактная информация или нет? или извлекать точную информацию?
источник

AP

Alexandra Panina in NLP_RU - Natural Language Processing & Text Mining
Всем привет! Может уже и был этот вопрос, но все же. Подскажите кто знает, если ли на свете библиотека или алгоритмы которые строят семантическую сеть/граф?
источник

D(

David (ddale) Dale in NLP_RU - Natural Language Processing & Text Mining
Alexandra Panina
Всем привет! Может уже и был этот вопрос, но все же. Подскажите кто знает, если ли на свете библиотека или алгоритмы которые строят семантическую сеть/граф?
Возможно, стоит конкретизировать) Каких свойств хочется от этого графа?
источник

AP

Alexandra Panina in NLP_RU - Natural Language Processing & Text Mining
Подобно синтаксическому графу, т.е. чтоб были показаны связи между словами
источник

D(

David (ddale) Dale in NLP_RU - Natural Language Processing & Text Mining
Я бы начал с уже готовой сети - wordnet. Там слова объединены в группы синонимов, и есть отношения между ними, типа "общее - частное", "часть-целое", антонимия.
источник

D(

David (ddale) Dale in NLP_RU - Natural Language Processing & Text Mining
Alexandra Panina
Подобно синтаксическому графу, т.е. чтоб были показаны связи между словами
Какие связи?
источник

AP

Alexandra Panina in NLP_RU - Natural Language Processing & Text Mining
Ну как они связан в предложении, так и на графе должны быть. Типа, есть прилагательно и существительное, если прилагательное относится к этому существительному, то на графе есть между ними свзь
источник

D(

David (ddale) Dale in NLP_RU - Natural Language Processing & Text Mining
Alexandra Panina
Ну как они связан в предложении, так и на графе должны быть. Типа, есть прилагательно и существительное, если прилагательное относится к этому существительному, то на графе есть между ними свзь
Ну так это как раз про синтаксический граф вроде.
источник

AP

Alexandra Panina in NLP_RU - Natural Language Processing & Text Mining
После синтаксиса хочется получить семантическую сеть. В тексте выделить индивидулы (существительные) и предикаты(описание существительных, могут быть представлены в качестве прилагательных). После, по описанию из библиотеки gensim получить векторное предтавление текста, и  какие индивидуалы и предикаты остались отобразить их свзяь на семантическом графе
источник
2020 April 22

rd

rus dacent in NLP_RU - Natural Language Processing & Text Mining
источник
2020 May 14

SZ

Sasha Zhu in NLP_RU - Natural Language Processing & Text Mining
ребят, всем привет, подскажите: существует ли датасет с новостями размеченный тегами?
источник

E

Elena in NLP_RU - Natural Language Processing & Text Mining
какими тегами?
источник