Size: a a a

Natural Language Processing

2020 July 31

I

I Апрельский... in Natural Language Processing
рандомная статья, но кейворды там правильные. в том числе упоминание Quora Question Pairs и Solr. хотя я предпочитаю ElasticSearch

https://mc.ai/product-matching-with-deep-learning/
источник

I

I Апрельский... in Natural Language Processing
кстати, в ES вроде впилил ДЛ — может теперь им одним можно обойтись и как-то найтрейнить
источник

I

I Апрельский... in Natural Language Processing
Константин Черных
День добрый! Вопрос новичка. Мне нужно связать варианты запросов ну например "лопата Самсунг" с конкретными категориями товаров и их атрибутами (телефон Самсунг, широкий экран). Собственно вопрос - есть ли гайды для именно такого применения nlp (находил только для анализа больших  текстов), и какой инструмент сможет этоттфункционал шустро крутить на сервере?
источник

КЧ

Константин Черных... in Natural Language Processing
I Апрельский
кстати, в ES вроде впилил ДЛ — может теперь им одним можно обойтись и как-то найтрейнить
В если эластик это умеет - вообще топ, в другом месте проекта как раз что-то типа эластика и нужно
источник

I

I Апрельский... in Natural Language Processing
https://www.semanticscholar.org/paper/Attribute-Extraction-from-Product-Titles-in-More/e6d2a841960e62205f1cab81669392c7fa430340

возможно тебе еще что-то такое интересно — extraction то бишь
источник

КЧ

Константин Черных... in Natural Language Processing
Да, это тоже в этой области
источник

I

I Апрельский... in Natural Language Processing
Константин Черных
В если эластик это умеет - вообще топ, в другом месте проекта как раз что-то типа эластика и нужно
https://www.elastic.co/blog/text-similarity-search-with-vectors-in-elasticsearch

ну вот вроде можно заюзать эмбеддинги. но думаю, что это будет недостаточно — нужен какой-то супервайзд. это я предполагаю, что у тебя есть размеченные данные. а вот как супервайзд запихнуть в ЕС — не видел.
источник

КЧ

Константин Черных... in Natural Language Processing
I Апрельский
https://www.elastic.co/blog/text-similarity-search-with-vectors-in-elasticsearch

ну вот вроде можно заюзать эмбеддинги. но думаю, что это будет недостаточно — нужен какой-то супервайзд. это я предполагаю, что у тебя есть размеченные данные. а вот как супервайзд запихнуть в ЕС — не видел.
Тут пример кода есть на оценку схожести, а это очень хорошо :)
источник

AL

Anton Lozhkov in Natural Language Processing
Предупрежу, что векторный поиск в эластике пока реализован на коленке и может оказаться недостаточно быстрым. Для ANN на 1млн+ векторов лучше иметь faiss рядом.
источник

AL

Anton Lozhkov in Natural Language Processing
I Апрельский
https://www.elastic.co/blog/text-similarity-search-with-vectors-in-elasticsearch

ну вот вроде можно заюзать эмбеддинги. но думаю, что это будет недостаточно — нужен какой-то супервайзд. это я предполагаю, что у тебя есть размеченные данные. а вот как супервайзд запихнуть в ЕС — не видел.
Супервайзд в эластике это обычно плагин LTR https://elasticsearch-learning-to-rank.readthedocs.io/en/latest/index.html

Но он своеобразный, иногда проще свой сервис с бустингом запилить
источник

I

I Апрельский... in Natural Language Processing
Anton Lozhkov
Супервайзд в эластике это обычно плагин LTR https://elasticsearch-learning-to-rank.readthedocs.io/en/latest/index.html

Но он своеобразный, иногда проще свой сервис с бустингом запилить
Спасибо! А может сходу и подскажешь, пожалуйста? Он трейнить может или ты ему модельку должен подать? Если последнее, то какие он принимает?
источник

AL

Anton Lozhkov in Natural Language Processing
Нативно принимает xgboost и ranklib, но в xgb за пару приседаний можно сконвертить lightgbm и catboost
источник

AL

Anton Lozhkov in Natural Language Processing
Учить может и внутри себя, там надо хитро описать фичеинжиниринг и настроить логирование обратной связи от юзеров
источник

OS

Oleg Serikov in Natural Language Processing
А сначала супервайзд обучить векторы, а потом по ним искать, и по необходимости дообучать и обновлять -- это фигня?
источник

OS

Oleg Serikov in Natural Language Processing
Или я не понел задач?
источник
2020 August 01

rr

ragib rahi in Natural Language Processing
Is there any vacany for junior NLP developer
источник

D•

Dan • Captain in Natural Language Processing
Было что-то по nlp неоднократно на @datasciencejobs, но вот чтоб для джунов не припомню, в основном для мидлов и синьоров
источник

AP

Alex Peresmeshnik in Natural Language Processing
Еще результатов объявили. Никто часом не участвовал из группы? )
источник

AP

Alex Peresmeshnik in Natural Language Processing
Alex Peresmeshnik
Еще результатов объявили. Никто часом не участвовал из группы? )
Протектрон ссылку на Telegram Contests снес +)
источник

D•

Dan • Captain in Natural Language Processing
А что за контестс?
источник