Делаю риквест на страницу через scrapy в shell. Затем через браузер захожу на страницу, копирую xpath элемента. Делаю response.xpath() но мне выдаёт совсем другое
Чейта вдруг, чтобы с большим шансом ответили, сюда надо кидать ссылки, трейсы и код, желательно на пастебин. А по телепатии- JS в браузере отключи, увидишь как этот запрос голый скрапи видит (и ещё можешь глянуть view(response) в шелле)
Либо таких элементов несколько на странице, и ты находишь первый. Либо кукисы надо правильные или заголовки ещё передавать. Либо кавычки ты не поставил в урле шелла. Короче, много вариантов