Телеграмм чат группы scrapy

Size: a a a

Scrapy

862 membersпожаловаться на группу

2021 May 09

Andrey Rahmatullin in Scrapy

not to my knowledge

источник

11:58пожаловаться #1

5157890186 in Scrapy

hmm

источник

11:59пожаловаться #2

2021 May 10

Anatoli Valenda in Scrapy

Всем ку. Есть вопрос по cloudflare. Выкопал запрос к api сайта. Через браузер заходит данные отдает, в инкогнито отдает, postman отдает (никаких Кук не ввожу), а скрапи блочит и отдает 403 ошибку. Я уже мозг сломал. Второй день воюю. Не понимаю как cloudflare определяет, что это не браузер.

источник

22:20пожаловаться #3

Anatoli Valenda in Scrapy

Ресурс beenverified.com

источник

22:21пожаловаться #4

Soare in Scrapy

насчет постмана странно
по сути же клаудфлеер собирает на js форму и отправляеет её - тем самым определяя это просто реквест без выполнения js или браузер или что-то эмулярующее его

источник

22:27пожаловаться #5

Anatoli Valenda in Scrapy

beenverified.com/hk/teaser?city=los%20angeles&fname=panagiotis&fn=panagiotis&MN=&ln=becris&state=CA&export type=json

источник

22:29пожаловаться #6

Anatoli Valenda in Scrapy

Откроется в браузере запрос?

источник

22:29пожаловаться #7

Soare in Scrapy

меня с рф не пускает)
зашел через прокси - запустил