AR
не знаю
Конкретно по этому вопросу:
https://developer.mozilla.org/en-US/docs/Web/HTTP/Headers/Accept-Encoding
Size: a a a
2021 June 20
A
AR
там вряд ли написано что стоит в нём передавать работая с requests
AR
нет там проверки, новое имя файла вычисляется и проверяется есть ли такой уже
BB
Подскажите, AWS_ENDPOINT_URL - что заполнять - то? пытался и ip:port и http://ip:port. Ошибки типа : ValueError: Invalid endpoint, или raise ValueError(f'Missing scheme in request url: {self._url}')
ValueError: Missing scheme in request url: h ( во втором случае). Развернут minio в локальной сети.
В доке примера нет - https://docs.scrapy.org/en/latest/topics/settings.html?highlight=%20AWS_ENDPOINT_URL#aws-endpoint-url
ValueError: Missing scheme in request url: h ( во втором случае). Развернут minio в локальной сети.
В доке примера нет - https://docs.scrapy.org/en/latest/topics/settings.html?highlight=%20AWS_ENDPOINT_URL#aws-endpoint-url
BB
А есть настройка аналогичная https://docs.scrapy.org/en/latest/topics/settings.html?highlight=DOWNLOAD_MAXSIZE#download-maxsize , только для минимального размера? В доке не нашел.
AR
это как лол
AR
лол
AR
он кидает в процессе, а не по факту
AR
и в этом есть смысл, а в некоем "минимальном размере ответа" нет
AR
я не знаю что тут пояснять, DOWNLOAD_MAXSIZE не про фильтрацию постфактум, а чтобы лишнего не скачать