К
Size: a a a
2020 March 16
AR
да, и я не знаю что делала эта настройка до этого изменения, честно говоря
AR
а, понятно, до этого оно просто не копировало файл в удалённый сторадж, если итемов нет
S
Всем спасибо, я просто неправильно интерпретировал назначение опции FEED_STORE_EMPTY
AR
вешайте тикет
К
Не совсем понял. Там еще имена полей в тот же csv в старых версиях каждый раз добавляются. Поэтому лучше по дате создания проверять
AB
Привет всем) ловлю такие 500ки на паре сайтов, потом тыкаюсь в shell/fetch и норм открывает:
2020-03-16 14:15:16 [scrapy.spidermiddlewares.httperror] INFO: Ignoring response <503 https://www.ololo.ru/ololo/>: HTTP status code is not handled or not allowed
2020-03-16 01:32:42 [scrapy.downloadermiddlewares.retry] DEBUG: Retrying <GET https://ololo2.ru/ololo2/> (failed 1 times): 500 Internal Server Error
Я так понимаю может надо охладить пыл? Автотротл такой стоит custom_settings = {
'AUTOTHROTTLE_ENABLED': True,
'AUTOTHROTTLE_START_DELAY': 5,
'AUTOTHROTTLE_MAX_DELAY': 60,
}