A
а в супе есть генерация JS?
Не смотрел это
Splash юзаю
Splash юзаю
Size: a a a
2018 July 25
EB
ну а почему еще все кидди и индусы на нем делают?
B
ну а почему еще все кидди и индусы на нем делают?
ну тогда вообще круто
B
ну а почему еще все кидди и индусы на нем делают?
BeautifulSoup does not execute Javascript, so any data delivered or rendered via JS will not be available to you if you scrape with BeautifulSoup.
B
ну и может он проще, поэтому и юзают
2018 July 28
NK
def parse(self, response):
l = ItemLoader(item=Product(), response=response)
l.add_xpath('name', '//div[@class="product_name"]')
l.add_xpath('name', '//div[@class="product_title"]')
l.add_xpath('price', '//p[@id="price"]')
l.add_css('stock', 'p#stock]')
l.add_value('last_updated', 'today') # you can also use literal values
return l.load_item()
А если я со страницы 2 имени, 2 цены извлекаю, то как здесь цикл с загрузкой в айтемлоадер написать?
B
ID:507308625
def parse(self, response):
l = ItemLoader(item=Product(), response=response)
l.add_xpath('name', '//div[@class="product_name"]')
l.add_xpath('name', '//div[@class="product_title"]')
l.add_xpath('price', '//p[@id="price"]')
l.add_css('stock', 'p#stock]')
l.add_value('last_updated', 'today') # you can also use literal values
return l.load_item()
А если я со страницы 2 имени, 2 цены извлекаю, то как здесь цикл с загрузкой в айтемлоадер написать?
Просто поля name1, name2
B
price1, price2
NK
price1, price2
на странице три товара, три разных товара, не один
B
ID:507308625
на странице три товара, три разных товара, не один
Тогда да, перебирать в цикле
2018 August 03
AS
Привет! 😅
B
Привет, коллеги.
Если кого-то вдруг интересует fulltime удаленная работа по написанию пауков на scrapy с хорошей зарплатой напишите в личку, порекомендую в компанию, где работаю 🙂
Если кого-то вдруг интересует fulltime удаленная работа по написанию пауков на scrapy с хорошей зарплатой напишите в личку, порекомендую в компанию, где работаю 🙂
Привет, расскажите про компанию в двух словах если не сложно