AC
да, вот тут приходится для каждого кейса что-то свое искать
Size: a a a
2020 April 09
AR
ну и юзерагенты ротировать это изи, одну мидлварь добавить, прокси ротировать аналогично, а вот всё остальное я не представляю какие тут бест практисес могут быть
AR
какой-нибудь мидлварь для более правильного ретрая разве что
AC
а с ротацией можно например одну мидлварь написать?
AC
чтобы в ней все ротации происходили?
AR
наверно
AC
ок, буду искать! Спасибо большое!
2020 April 10
Д
Подскажите пожалуйста,в чем ошибка
Д
Д
Есть кто?
Д
Понятно
Д
В общем я из запроса, видимо тащащего товары, скопировал параметры для curl, далее отправляю в fetch через scrapy.utils.curl.curl_to_request_kwargs(), заменив куки на response'овские, но чет не работает(
Д
Запрос filter, он самый первый выскакивает при прокрутке страницы
Д
Помогите пожалуйста😔
B
Данил
В общем я из запроса, видимо тащащего товары, скопировал параметры для curl, далее отправляю в fetch через scrapy.utils.curl.curl_to_request_kwargs(), заменив куки на response'овские, но чет не работает(
как я вижу куки берутся из респонса, а до этого запрос идёт?
B
Принтаните что лежит в response.headers.getlist(‘cookies’)
AR
я б для начала курлом проверил