Телеграмм чат группы scrapy

Size: a a a

Scrapy

395 membersпожаловаться на группу

2020 February 14

Технопёс in Scrapy

Ruslan Chernenko

Альтернатива селениума в виде PhantomJS жива?

на фантом забили, там по итогу один человек остался на разработке, и тот не вывез

источник

11:37пожаловаться #1

Ruslan Chernenko in Scrapy

мде

источник

11:37пожаловаться #2

Ruslan Chernenko in Scrapy

спасибо

источник

11:37пожаловаться #3

Andrey Rahmatullin in Scrapy

есть puppeteer

источник

11:38пожаловаться #4

Andrey Rahmatullin in Scrapy

и splash

источник

11:38пожаловаться #5

Ruslan Chernenko in Scrapy

Andrey Rahmatullin

есть puppeteer

он только в асинхронность?

источник

11:41пожаловаться #6

Andrey Rahmatullin in Scrapy

всмысле?

источник

11:42пожаловаться #7

Ruslan Chernenko in Scrapy

Andrey Rahmatullin

всмысле?

ну, требует обертки в виде асинкио

источник

11:42пожаловаться #8

Andrey Rahmatullin in Scrapy

он вообще не на питоне :)

источник

11:42пожаловаться #9

Ruslan Chernenko in Scrapy

Andrey Rahmatullin

он вообще не на питоне :)

ай-ой, я уже просто обертку откопал

источник

11:42пожаловаться #10

Ruslan Chernenko in Scrapy

не сюда

источник

11:43пожаловаться #11

Andrey Rahmatullin in Scrapy

как и splash

источник

11:43пожаловаться #12

Andrey Rahmatullin in Scrapy

ну pyppeteer на питоне, да

источник

11:43пожаловаться #13

Ruslan Chernenko in Scrapy

я так полагаю selenium или puppeteer выбор каждого? Или есть принципиальные плюсы у второго?

источник

11:45пожаловаться #14

Технопёс in Scrapy

Ruslan Chernenko

я так полагаю selenium или puppeteer выбор каждого? Или есть принципиальные плюсы у второго?

селениум это полноценный браузер, и он не для скрапинга от слова совсем

источник

11:46пожаловаться #15

Ruslan Chernenko in Scrapy

Технопёс

селениум это полноценный браузер, и он не для скрапинга от слова совсем

а есть где почитать насчет этого?

источник

11:47пожаловаться #16

Ruslan Chernenko in Scrapy

потому что когда вставал вопрос про динамические страницы всегда уходил в селениум

источник

11:47пожаловаться #17

Andrey Rahmatullin in Scrapy

динамические страницы не значит браузер

источник

11:48пожаловаться #18

Andrey Rahmatullin in Scrapy

https://docs.scrapy.org/en/latest/topics/dynamic-content.html

источник

11:48пожаловаться #19

Ruslan Chernenko in Scrapy

Andrey Rahmatullin

динамические страницы не значит браузер

ну, а puppeter это что тогда?

источник

11:48пожаловаться #20