C
при чем, результат работы кол бека выводится в консоль в нормальном виде, но уже после того как отработал parse
Size: a a a
2019 October 01
C
т.е. асинхронщина на всю площать головы
C
это моя самодельная затычка
C
если response.status != 200:
return self.retry(response)
return self.retry(response)
C
и в ретри вшит граббер новой прокси. т.е. повторить с новой проксей
C
ты уверен, что там 200, а не бесконечный цикл
нет но работало норм, пока не появилась необходимость парсить вложенную страницу
C
внутри текущего паука
C
вангую, что там не 200
так в этом и суть. еслин е 200, он идет, берет рандумную проксю и повторяет запрос
C
и так пока не найдется прокся с которой отработает
C
так как скрепи асинхронен, то проблем это не создает. эта штука норм работала
C
И это заканчивается? находится прокся которая 200 возвращает, или все по кругу идут? что в логах
каждая страница должна дать 200
C
если прокся умерает, ее банят например. ретри берет новую
C
дает