Телеграмм чат группы scrapy

Ws?

22:01пожаловаться #1

Мм?

Вэб сокеты

А как понять, это ли?

22:03пожаловаться #4

закладка WS в девтулзах

22:04пожаловаться #5

В network где и все остальное, просто протокол будет ws

22:04пожаловаться #6

Он к xhr тоже относится?

22:05пожаловаться #7

нет

22:05пожаловаться #8

А если оно, что делать с этим?

22:06пожаловаться #9

Ты сначала проверь, это ли

22:07пожаловаться #10

https://github.com/scrapy/scrapy/issues/2007

GitHub

Scrapy websockets downloader · Issue #2007 · scrapy/scrapy

Seems like now Scrapy does not provide any way to crawl website that use websockets. Can we support something like this? There are websocket implementations based on Twisted: http://autobahn.ws/pyt...

22:07пожаловаться #11

и да

22:07пожаловаться #12

может просто "Повторяю те же запросы без браузера - результата нет." потому что там ещё какие-нибудь сессии проверяются

22:07пожаловаться #13

95% что это не ws, но все может быть

22:08пожаловаться #14

Их очень редко используют

22:08пожаловаться #15

Andrey Rahmatullin

Хотелось бы надеяться... Но я все действия в браузере повторял. Стирал куки и вставлял напрямую заранее сохранённые урлы запросов.

22:10пожаловаться #16

это как? там гет что ли?

22:10пожаловаться #17

Да

22:10пожаловаться #18

izzz zzi in Scrapy

Copy as curl пробовал ?

22:13пожаловаться #19

izzz zzi in Scrapy

И курлрм дернуть