Телеграмм чат группы scrapy

если это единоразовая работа да на 600 позиций - проще посадить девочку один раз, при условии что ковыряние за день с этими нейросетями или другими сравнениями не взлетит. А еще можно попробовать у них запросить прайсы для оптовиков-дилеров-дистрибов выгрузку с 1с и бла-бла, обычно там бывают в позиции какой-нибудь артикул и название, или UPC/MFG код, по-которому отсоответствуется.

источник

21:38пожаловаться #6

Кирилл in Scrapy

хотя, я бы ещё посмотрел на саму страницу, может быть там таки есть где-то ID, а мы тут паримся

источник

21:40пожаловаться #7

ildar in Scrapy

насчет слов, у яндекса есть инструменты по токенизации т.ч. кириллицы

источник

21:40пожаловаться #8

ildar in Scrapy

ну вообще несколько странно задача звучит - зачем сравнивать товар с трех сайтов, вангую там заказчику на самом деле явно немножко не то надо)

не, ну задача достаточно тривиальна, сравнивать цены с разных сайтов, чтоб выбрать самую низкую

источник

21:43пожаловаться #10

ildar in Scrapy

https://github.com/nlpub/pymystem3

GitHub

nlpub/pymystem3

A Python wrapper of the Yandex Mystem 3.1 morphological analyzer (http://api.yandex.ru/mystem). The original tool is shipped as a binary and this library makes it easy to integrate it in Python pro...

источник

21:43пожаловаться #11

ildar in Scrapy

Кирилл

не, ну задача достаточно тривиальна, сравнивать цены с разных сайтов, чтоб выбрать самую низкую

а ну так-то да, тока обычно на сайтах цены для розницы, а для всяких оптовиков там другие цены. А еще некоторые оптовики странные могут отгружать цены только прайсами какими-нибудь или всякими извращениями аля wsdl там или xml-api или yandex market yaml. Ну, надеюсь он все выяснил.

источник

21:45пожаловаться #12

ildar in Scrapy

для всякой сегментации и токенизации эта штука самая мощная, выше питоновую обвязку линканул
https://yandex.ru/dev/mystem/
посмотри там на примеры лемматизации - по-крайней мере всякие суффиксы-шмуффиксы ободрать легче станет. и потом уже сравнивать в духе сравнения set's или еще какой текстовой хешизации на-коленке

yandex.ru

MyStem - Технологии Яндекса

Программа MyStem производит морфологический анализ текста на русском языке.

источник

21:51пожаловаться #13

Ivan in Scrapy

ildar

тут цены конкурентов сравниваются

источник

21:52пожаловаться #14

ildar in Scrapy

еще могу посоветовать сравнивать с яндекс-маркетом в своем по-крайней мере городе.