Size: a a a

2021 April 13

DF

DOG FATHER in Scrapy
Все верно
источник

AR

Andrey Rahmatullin in Scrapy
нет, не это он хочет
источник

AR

Andrey Rahmatullin in Scrapy
ты хочешь англоязычные названия статей в русской википедии?
источник

A

Andrii in Scrapy
Вопрос: есть сайт www.zoominfo.com скопировал хедерс - прохожу клаудфлар протекшен. (кукис в скрепи отключил). Но могу сделать 20 успешних реквестов, потом идет 403. (ротация люминати прокси). НО! если перезапущу паук то опять же 20 успешних реквестов и так по колу. В чем дело?
источник

МС

Михаил Синегубов... in Scrapy
сайт IPv6 вроде держит, попробуй с десяток проксей взять и тестануть. Вдруг люминатти какие хвосты оставляет
источник

МС

Михаил Синегубов... in Scrapy
а, кстати. Заголовки постоянные? в смысле, и при перезапуске те же?
источник

МС

Михаил Синегубов... in Scrapy
я просто пытаюсь понять, что постоянное, что переменное...
источник

A

Andrii in Scrapy
есть хорош провайдер ип6 проксей?
источник

DF

DOG FATHER in Scrapy
Тогда вопрос, как поменять кодировку, чтобы scrapy понимал ссылки на русском?
источник

AR

Andrey Rahmatullin in Scrapy
Это не требуется
источник

A

Andrii in Scrapy
постоянние
источник

A

Andrii in Scrapy
источник

AR

Andrey Rahmatullin in Scrapy
Ээ
источник

A

Alex in Scrapy
Юникод же ж... Хоть кетайский. Просто бери ссылку и всё.
источник

МС

Михаил Синегубов... in Scrapy
proxy6.net - есть бомжатский вариант, на 3 дня
proxys.io - брал у них персоналки ip4 но это давно было
источник

МС

Михаил Синегубов... in Scrapy
proxy6 для начала попробуй. как самое дешёвое. Вдруг прокатит :)
источник

МС

Михаил Синегубов... in Scrapy
а если в json лить - данные есть или нету?
источник

AR

Andrey Rahmatullin in Scrapy
проще в статы и/или лог посмотреть
источник

МС

Михаил Синегубов... in Scrapy
https://cibtvisas.com/
😂, мне нравится как народ шифруется, ну, совсем без палева
источник

NS

Nikolay Semenov in Scrapy
😱
источник