Size: a a a

2021 June 15

AR

Andrey Rahmatullin in Scrapy
окей
источник

МС

Михаил Синегубов... in Scrapy
он не "исполняет JS", а именно "рендерит", так что, хрен редьки не слаще :)
источник

AR

Andrey Rahmatullin in Scrapy
рендерит он его QtWebkit'ом
источник

AR

Andrey Rahmatullin in Scrapy
что является браузером
источник

М

Мур in Scrapy
Понял вас джентльмены, тогда селениум мой выбор, в случае чего, его я уже освоил)
источник

М

Мур in Scrapy
Кстати чем больше работаю со scrapy, тем больше влюбляюсь в него, уже и веб разработка не интересна, джанго, фласки, как то отошли, а парсинг прям моё)
источник
2021 June 16

A

Antonio in Scrapy
Hello! I am trying to scrap this web: https://www.appinformatica.com/componentes/procesadores/ But all the products are loaded just when I do a little bit of scroll. I think the web activate a javascript function but in network tab I see the web just load a txt. How can I get all products?
источник

A

Antonio in Scrapy
Thank U
источник

S

SoHard 🎄 in Scrapy
источник

A

Antonio in Scrapy
Yes, but this web is not using ajax I think
источник

A

Andrii in Scrapy
Just make request to this txt and parse data
источник

A

Antonio in Scrapy
But if I acess the request, I can not go into the product to extract all data I need
источник

A

Antonio in Scrapy
Because that txt just appears some time in the web, change, is inside a script, and return just normal text
источник

S

SoHard 🎄 in Scrapy
источник

A

Antonio in Scrapy
I need to load all products to go into them and extract all
источник

A

Antonio in Scrapy
Ok, uses ajax but not in the way like ?=1, or ?=2
источник

A

Antonio in Scrapy
Can you show me the line please? It's hard to find it in chrome without number
источник

A

Antonio in Scrapy
And sorry, am new in scrapy
источник

S

SoHard 🎄 in Scrapy
источник

AR

Andrey Rahmatullin in Scrapy
select the XHR tab
источник