or get two files?

I want the same file to be downloaded multiple times.

Without replacing the first one

make your own custom pipeline from FilesPipeline with overrided method file_path

something like this:

def file_path(self, request, response=None, info=None):
        return f'files/{uuid.uuid4().hex}')

What is that uuid

it's from stdlib

import uuid, will generate unique id

Ok

Thank you

and maybe set  FILES_EXPIRES=0 in settings, i'm not sure, try it

поправил, пока все ровно😌

Ребят, помогите: делаю        

next_page_url = extract_with_xpath("//a[contains(@label, 'Next Page')]/@href")
        if next_page_url is not None:
            yield scrapy.Request(response.urljoin(next_page_url))

получаю

2020-03-16 19:44:56 [scrapy.downloadermiddlewares.redirect] DEBUG: Redirecting (301) to <GET https://www.bigbear.com/events/full-circle-snowboarding-event/None/> from <GET https://www.bigbear.com/events/full-circle-snowboarding-event/None>
2020-03-16 19:45:04 [scrapy.downloadermiddlewares.redirect] DEBUG: Redirecting (301) to <GET https://www.bigbear.com/events/moonlight-forest-paint-n-sip/None/> from <GET https://www.bigbear.com/events/moonlight-forest-paint-n-sip/None>
2020-03-16 19:45:10 [scrapy.downloadermiddlewares.redirect] DEBUG: Redirecting (301) to <GET https://www.bigbear.com/events/wyatts-honky-tonk-weekends/None/> from <GET https://www.bigbear.com/events/wyatts-honky-tonk-weekends/None>
2020-03-16 19:45:16 [scrapy.downloadermiddlewares.redirect] DEBUG: Redirecting (301) to <GET https://www.bigbear.com/events/wildflower-walks/None/> from <GET https://www.bigbear.com/events/wildflower-walks/None>

оно переходит на следующую страницу но все линки с нее с /none/

То чувство, когда написал is not None, а оно все равно None(((

не /none/, а где-то ты сунул питоний None в них

я тоже помню так писал, еще тема if a is not None and a!="" and a is not "":
чтобы точно что-то да сработало

Чо ж не if a

Всем привет.
Подскажите пожалуйста что лучше использовать для парсинга сайтов?
Сейчас в голове есть такая связка, Django как админ панель куда будут прилетать данные после парсинга, и scrapy собсно для самого парсинга, может подскажете ещё моменты на которые нужно обратить внимание?