AR
почему выборочный, или второй раз тоже один запрос проходит?
Size: a a a
2020 October 26
МС
а, и еще, scrapy shell норм отрабатывает
МС
о, точно, ща попробую
МС
ууу, блин, точно бан.
но, как эта собака палит? кука отключена...
но, как эта собака палит? кука отключена...
AR
фингерпринтинг 🤷♂️
B
не IP это точно.
почему?
МС
Читай выше. Браузер и постман все ок
МС
Два, три, пять запросов
B
а, ты с одном айпишником ходишь?
МС
Ага, по крайней мере пока
МС
Система бага интересная. Раньше хоть понятно было по каким признакам.
А щас - скрапи забанили, постман нормально живет
А щас - скрапи забанили, постман нормально живет
B
может быстро шлешь реквесты?
МС
ща паузу влеплю, но, пробовал в 1 конкурирующий - бан
B
ну судя по тому что постман проходит, то тут просто по юзер-агенту/ip/кол-ву запросов ограничение
МС
юзерагент - выпадает, я ротатор поставил....
20 секундная пауза - не катит :).
хех, аж интересно, блин.
20 секундная пауза - не катит :).
хех, аж интересно, блин.
AR
(куки включи)
МС
(куки включи)
неть, что с куками, что без..
что с рандомными арентами или статикой....
что с рандомными арентами или статикой....
B
а постманом попробуй несколько реквестои послать сразу
B
юзерагент - выпадает, я ротатор поставил....
20 секундная пауза - не катит :).
хех, аж интересно, блин.
20 секундная пауза - не катит :).
хех, аж интересно, блин.
ротатор выключи 🙂
МС
ротатор выключи 🙂
Начиналось без него😂