Size: a a a

2021 May 19

H

Harsh in Scrapy
There's some middle in this case.
Usually i cut trailing / leading with replace, Regex.
источник

AR

Andrey Rahmatullin in Scrapy
ah OK
источник

H

Harsh in Scrapy
Thanks :)
источник
2021 May 20

SK

Semyon Krutolevich in Scrapy
Ребят, где проксю берёте для парсинга, может есть сервисы хорошие? а то 503 зае..
источник

A

Alex in Scrapy
Уже чепятали здесь не раз:

fineproxy.org, proxys.io, proxy6.net, brightdata.com
источник

DF

DOG FATHER in Scrapy
надо бы в faq добавить
источник

A

Alex in Scrapy
Это админов надо просить.
Но беда в том, что в >80% случаев при наличии faq (закрепа и т.п.) всё равно пишуть "дайте..." 🤷‍♂
источник

B

Bulatbulat48 in Scrapy
Можете сделать пулл реквест в FAQ https://github.com/bulatbulat48/ru-scrapy-python
источник

A

Alex in Scrapy
Хорошая мысль. Надо поскрести по сусекам, что есть из хороших сервисов продажи прокси...
источник

A

Andrii in Scrapy
С рефералами ?)
источник

МС

Михаил Синегубов... in Scrapy
ага (тут должна быть пикча с довольным котом) :))
источник

S

SoHard 🎄 in Scrapy
чур ссылка на люминати(брингдата) моя
источник

МС

Михаил Синегубов... in Scrapy
кстати, сейчас немножко секасом с озоном занимаюсь.
Эти уроды первые 35 страниц результатов зацикливают 🙃.
Весь день вчера себе мозги выносил, не мог понять, почему так мало товаров на выходе
источник

S

SoHard 🎄 in Scrapy
иллюзия большого количества товара)
источник

МС

Михаил Синегубов... in Scrapy
не, ограничение выдачи. По факту - товара в разделе много, но показывают в ленте, только первые 35 страниц, а потом гоняют их по кругу.
По человеческой логике - все правильно, кто дальше 35 странице в каталоге пойдет, это я вчера сидел мотал 106 страниц 😂
источник

МС

Михаил Синегубов... in Scrapy
но фишка прикольная :), не встречал еще, видел только когда последнюю страницу "морозят", в смысле, не меняется.
А так, на первый взгляд все норма, а там, вон оно че
источник

OS

Oleg Shleiko in Scrapy
Ты без селениума по озону рассекаешь?
источник

МС

Михаил Синегубов... in Scrapy
угу, я селениумом только один раз парсил - и мне не понравилось
источник

OS

Oleg Shleiko in Scrapy
капчи тоже обходишь?
источник

МС

Михаил Синегубов... in Scrapy
зачем? не видел я ваших капчев :)
я по вебовский запросам только чуток по каталогу пробежал (примерно 100 страниц).
а так, мобильное API + прокся
источник