К
hello every one
Size: a a a
2020 March 09
A
во, вообще смешно
A
Crawled 4139 pages (at 37 pages/min), scraped 4137 items (at 37 items/min)
2020 March 10
МС
народ, кто, относительно, недавно регался на AWS, этап "Подтверждение ваших идентификационных данных", там +7 телефоны нормально проходят?
а то постоянно "Извините, при обработке вашего запроса возникла ошибка."...😕
а то постоянно "Извините, при обработке вашего запроса возникла ошибка."...😕
u
народ, кто, относительно, недавно регался на AWS, этап "Подтверждение ваших идентификационных данных", там +7 телефоны нормально проходят?
а то постоянно "Извините, при обработке вашего запроса возникла ошибка."...😕
а то постоянно "Извините, при обработке вашего запроса возникла ошибка."...😕
Пару недель назад регался. Та же ошибка только после чата с техподдержкой они мне позвонили. Год назад регался звонил робот. Возможно россию сейчас тщательнее проверяют.
AK
How to set retry times for a particular request in crawl spider?
AK
Anil Kumar
How to set retry times for a particular request in crawl spider?
Any one please reply
B
Anil Kumar
How to set retry times for a particular request in crawl spider?
Set max_retry_times in the request meta. https://doc.scrapy.org/en/latest/topics/downloader-middleware.html#retry-times
AK
Is it possible in crawl spider?
AR
(max_retry_times actually)
AR
Anil Kumar
Is it possible in crawl spider?
no
AR
unless you create the requests yourself
AK
I have to make custom Middleware
AR
no
AR
you need to create requests manually
AR
or just set RETRY_TIMES for the whole spider
AR
:-/