i
а во, нашел, если книжка не воспринимается, можно его глянуть: https://www.youtube.com/watch?v=xhoX3-NdM9k&list=PL-_cKNuVAYAXkJLFpu-dq3nphjftOOR6C
Size: a a a
2020 April 02
АД
Спасибо, Ildar, буду смотреть!
BK
Всем привет, может кто знает какие-нибудь сервисы для парсинга зарубежные?
S
а во, нашел, если книжка не воспринимается, можно его глянуть: https://www.youtube.com/watch?v=xhoX3-NdM9k&list=PL-_cKNuVAYAXkJLFpu-dq3nphjftOOR6C
Очень клевый курс, рекомендую тоже
B
Всем привет, может кто знает какие-нибудь сервисы для парсинга зарубежные?
https://scrapinghub.com/
рекомендую хороший сервис: полный цикл и автоэкстракт, можно и самому пауков писать и закидывать в скрапи клауд.
рекомендую хороший сервис: полный цикл и автоэкстракт, можно и самому пауков писать и закидывать в скрапи клауд.
VB
https://scrapinghub.com/
рекомендую хороший сервис: полный цикл и автоэкстракт, можно и самому пауков писать и закидывать в скрапи клауд.
рекомендую хороший сервис: полный цикл и автоэкстракт, можно и самому пауков писать и закидывать в скрапи клауд.
стоит только дофигища
BK
https://scrapinghub.com/
рекомендую хороший сервис: полный цикл и автоэкстракт, можно и самому пауков писать и закидывать в скрапи клауд.
рекомендую хороший сервис: полный цикл и автоэкстракт, можно и самому пауков писать и закидывать в скрапи клауд.
спасибо
МС
ребят, новая фича follow_all, как ей пользоваться?
ругается
urls = response.xpath('//section[@class="catalog"]//a[@class="box-link"]/@href').getall()
yield response.follow_all(urls)ругается
ERROR: Spider must return Request, BaseItem, dict or None, got 'generator'
МС
да, я глупенький 🙄
БП
yield from
AR
угу
iz
ребят, новая фича follow_all, как ей пользоваться?
ругается
urls = response.xpath('//section[@class="catalog"]//a[@class="box-link"]/@href').getall()
yield response.follow_all(urls)ругается
ERROR: Spider must return Request, BaseItem, dict or None, got 'generator'
Лень список перебрать ?)
МС
Лень список перебрать ?)
ага :)
МС
yield from
спс
RG
Парни подскажите как через scrapy shell загрузить урл с проксей?
AR
https_proxy енввар, как обычно
RG
https_proxy енввар, как обычно
можно пример? без прокси все понятно fetch('http://site.ru') а как загрузить site.ru через проксю прям в шеле?
AR
а как не напрямую?
