Телеграмм чат группы scrapy

Пробовал с прокси, даже купил 10 штук, но буквально через день начал сыпаться. Что самое интреесное, через скрапи дольше капча не прилетает. Мне кажеться именно как-то силениум палится.

источник

14:59пожаловаться #3

Sergey Sergey in Scrapy

или пюпитр

источник

14:59пожаловаться #4

Мак in Scrapy

так подключите сервис решения капчи! затраты минимальны, а результат очень даже

источник

15:02пожаловаться #5

Denis Olianiuk in Scrapy

Sergey Sergey

или пюпитр

Ну может попробую как вдохновение будет, но так устал уже пробовать его парсить. Думал может знает кто-то как именно селениум/хром сливает инфу что он ботом управляется.

источник

15:03пожаловаться #6

Denis Olianiuk in Scrapy

Мак

так подключите сервис решения капчи! затраты минимальны, а результат очень даже

Там прикол в том, что капчи приходят такие, будто сайт на 100% что я бот. По 10 раз нужно выбрать автобус. И после того как решил вторая приходит точно такая-же. А после того как решаешь такую-же вторую только отпускает на 2-3 минуты и опять по 2 раза решать нужно.

источник

15:05пожаловаться #7

Твінтурбововк in Scrapy

Sergey Sergey

или пюпитр

Кстати
Есть гайд по пюпитеру ?

источник

15:06пожаловаться #8

Мак in Scrapy

количество потоков уменьши, он на разные потоки втыкать капчи может, когда куки не успели от решенной капчи придти

источник

15:06пожаловаться #9

Твінтурбововк in Scrapy

Пробовал гуглить но либо. руки не оттуда либо плохо гуглил

источник

15:06пожаловаться #10

Denis Olianiuk in Scrapy

Мак

Это в 1 поток, когда браузер запустил из питона, а потом руками по нему ходишь.

источник

15:07пожаловаться #11

Мак in Scrapy

а, я думал про скрапи

источник

15:07пожаловаться #12

Denis Olianiuk in Scrapy

https://pastebin.com/ESfGUDSY - вот так запускаю силениум и если руками перейти на лругую страницу - капча

Pastebin

[Python] from selenium import webdriver from selenium.webdriver.common.proxy import Prox - Pastebin.com

источник

15:14пожаловаться #13

Мак in Scrapy

я стараюсь максимум из запросов выжимать. а селениум - хрен его знает, какие там скрипты он в тайне от меня выполняет)))

источник

15:19пожаловаться #14

Denis Olianiuk in Scrapy

ну через скрапи чуть дольше капча не прилетает (купил 10 платных прокси) но потом всеравно палят. А через бесплатные - вообще никак. А покупать месячную подписку на прокси - дорого

источник

15:22пожаловаться #15

Мак in Scrapy

у меня на сервисе решения капчи 150 руб уже месяца три лежат... довольно медленно расходуются)))

источник

15:23пожаловаться #16

izzz zzi in Scrapy

Мак

у меня на сервисе решения капчи 150 руб уже месяца три лежат... довольно медленно расходуются)))

150₽ это 1к вроде нет ?)

источник

15:24пожаловаться #17