Size: a a a

2019 July 11

M

Mohamad in Scrapy
Почему при запуске спайдера выдает
NameError: name 'scrapy' is not defined
источник

M

Mohamad in Scrapy
print('e')

class HibbetcrawlerSpider(scrapy.Spider):
На этой стадии
источник

АН

Алексей Нагорский in Scrapy
А как ты его импортировал?
источник

I

Ivan in Scrapy
Mohamad
Почему при запуске спайдера выдает
NameError: name 'scrapy' is not defined
зайди в папку проекта, там запусти
источник

JW

John Wayne in Scrapy
Люди вопрос, а какие ньюансы есть в работе с формами? С гугл.ком работает код, а на олх.юа, бесконечный редикрект
import scrapy
from scrapy.utils.response import open_in_browser
from scrapy.http import Request


class Test2Spider(scrapy.Spider):
   name = 'test_2'
 
   start_urls = [
   'https://www.olx.ua/list/',
]


   def parse(self, response):
       data = {
       'q':'citylight'
       }
       yield scrapy.FormRequest.from_response(
       response,
       formid='mainTopSearch',
       formdata=data,
       callback=self.after_form,
       dont_filter=True,
       )

   def after_form(self,response):
       open_in_browser(response)

2019-07-11 23:30:23 [scrapy.downloadermiddlewares.redirect] DEBUG: Redirecting (301) to <POST https://www.olx.ua/list/q-citylight/> from <POST https://ww
w.olx.ua/list/q-citylight/>
2019-07-11 23:30:29 [scrapy.downloadermiddlewares.redirect] DEBUG: Redirecting (301) to <POST https://www.olx.ua/list/q-citylight/> from <POST https://ww
w.olx.ua/list/q-citylight/>
2019-07-11 23:30:36 [scrapy.downloadermiddlewares.redirect] DEBUG: Redirecting (301) to <POST https://www.olx.ua/list/q-citylight/> from <POST https://ww
w.olx.ua/list/q-citylight/>
и так без конца...
источник
2019 July 12

S

Stanislav in Scrapy
почему выражение //body../head не верно?
источник

S

Stanislav in Scrapy
ведь две точки это ведь выбор родителя текущего узла
источник

АН

Алексей Нагорский in Scrapy
Stanislav
почему выражение //body../head не верно?
Наверно в начале точку надо
источник

E

Evgen in Scrapy
//body/../
источник

DK

Dmytro Kuzmichov in Scrapy
Добрый день,хотел у вас спросить, как реализовать репарсинг в скрэпи?
источник

Y

Yurii in Scrapy
Dmytro Kuzmichov
Добрый день,хотел у вас спросить, как реализовать репарсинг в скрэпи?
Может тут самое первое https://doc.scrapy.org/en/1.5/topics/practices.html
process.crawl(MySpider)
источник

DK

Dmytro Kuzmichov in Scrapy
Yurii
Может тут самое первое https://doc.scrapy.org/en/1.5/topics/practices.html
process.crawl(MySpider)
спасибо, буду смотреть
источник

s

serhii in Scrapy
Скажите чайнику, что такое "репарсинг"?
источник

Y

Yurii in Scrapy
serhii
Скажите чайнику, что такое "репарсинг"?
Начнем с того что и парсинг слова нет.
источник

DD

Danil Denysenko in Scrapy
Yurii
Начнем с того что и парсинг слова нет.
Разве?)
источник

DD

Danil Denysenko in Scrapy
На памяти всплывает один человек с большим опытом, который объяснял разницу между скрапингом и парсингом
источник

Y

Yurii in Scrapy
Danil Denysenko
Разве?)
Чет не нашел)
источник

s

serhii in Scrapy
Danil Denysenko
На памяти всплывает один человек с большим опытом, который объяснял разницу между скрапингом и парсингом
Кто это?
источник

AK

Andrew Kazancev in Scrapy
Парсинг - выборка, нет?
источник

DD

Danil Denysenko in Scrapy
serhii
Кто это?
та его нету в єтом чате. Он 6 лет пхпшником работал, а после проджект менеджером
источник