ок, спасибо, изучу этот вопрос детальнее

Имел ли кто нить дело с планировщиком запросов?

Хочу в случае если мне забанили с одного прокси, закинуть этот URL в конец очереди запросов, и что бы он выполнился с нового ip и с особой осторожностью)

> что бы он выполнился с нового ip
он и выполнится, скорее всего, с нового IP, если ротатор использовать
>с особой осторожностью
это значит "потихонечку, что бы никто не заметил"? :), это вообще хз, как реализовать :))

https://github.com/TeamHG-Memex/scrapy-rotating-proxies
за другие ротаторы не скажу, у этой точно есть повторов, если прокся забанена (повторов с новой рандомной проксей)

Есть сайт, на котором бесконечный скроллинг страницы (React).

XHR запрос для получения новых данных выглядит вот так:

https://mstdn.social/api/v1/accounts/5168/followers?max_id=966705
                                                                                           ....max_id=964358

Совершенно не понятно, откуда берется max_id ?
Возможно это типовой случай, и уже кто - то сталкивался. Если нет, извините за беспокойство.



На всякий случай зарегал акк, возможно кто - то пожелает сам взглянуть:
login: seriyed350@gocasin.com
password: seriyed350

*add
https://mstdn.social/web/accounts/5168/followers

скорее всего, это последний ID в предыдущих данных

Точно нет. Такого ID в предыдущих данных нет

дай ссылку, что бы запрос глянуть

"Наберут по объявлению...."©

😀

а вообще, я сам в афиге, ни разу не видел пагинацию через заголовки

😕

чего? 👀

Ну странная хрень

защита от тупых парсеров)

от тупых писателей парсеров 😂

Любая защита, когда ее расковыряешь, кажется "защитой от тупых"

ага, приятно сделать себе приятно)