Такой вопрос. Паук заходит в категорию, собирает некоторые данные для formdata и отправляет formrequest на ajax запрос.
Апи возвращает список товаров с некоторыми другими параметрами, такими как количество страниц в категории всего. По-другому получить количество страниц нельзя.
Вопрос, как написать паука так, чтобы он с response категории отправил запрос в апи, получил количество страниц и сгенерировал нужное количество запросов (меняя для каждого из них в formdata параметр номера страницы).