AR
я не это спрашивал
Size: a a a
2020 April 25
AR
что у тебя есть дикт я уже понял, а сервер что ждёт?
D
Если открыть эту (https://metro.zakaz.ua/uk/buckwheat/ ) страницу, контент не загружается в скрапи.
Я нашёл один пост запрос, который в реквесте содержит данные, которые я выше отправил
Я нашёл один пост запрос, который в реквесте содержит данные, которые я выше отправил
D
Я решил эмитировать этот процесс, но наткнулся на то, что скрапи дикт не принимает
AR
ну так и запрос не дикт шлёт
AR
ну да, джсон там
AR
делай из дикта джсон
AR
ну и хедеры выставлять конечно
D
делай из дикта джсон
Это JsonRequest надо ?
AR
нет
AR
это import json надо, как везде в питоне
AR
ну можно и JsonRequest наверно
D
Ок, спасибо большое!
VZ
Ребят, натолкнулся на проблему, пробовал парсить yelp.com и словил бан. Не получалось подключить user_agent и proxy, я решил попробовать ROBOTSTXT_OBEY = False и видимо после 150 запросов начал получать 503 ошибку. Что в таких ситуациях можно сделать, подскажите пожалуйста?
VZ
Спасибо, но я вроде перепробовал много разных и почему-то ни один не подходил, с чем это может быть связанно?
VZ
ааа