Телеграмм чат группы scrapy

Кирилл

Хэхэ, столько вопросов про авито, что пора самому его спарсить, чтоб отвечать))

короче вот эти два хеша похожи, с этого числа генерируется ссылка

12:37пожаловаться #1

чем они похожи?

Кирилл

чем они похожи?

неее всетаки они не похожи, ну думаю из этого хешика генерируется pkey

12:42пожаловаться #4

на авито через мобильную версию, там этот pkey статический, постоянный, просто один раз получить его и все, а на декспоте динамический

12:45пожаловаться #5

Доброго времени суток! Обновился до scrapy 1.7.3 и не пойму в чем дело.. Кто нибудь сталкивался с ошибкой подобной?

Нашел issue в репе - но не могу допетрить - что это такое

20:17пожаловаться #8

https://github.com/scrapy/scrapy/issues/3872

GitHub

Document changed CrawlerProcess.crawl(spider) functionality in Release notes · Issue #3872 · scrapy/scrapy

Possible Regression. See explanation beneath spider. MWE Testcode: #!/usr/bin/env python3 # -*- coding: utf-8 -*- # import logging import scrapy logger = logging.getLogger(__name__) class Spider(sc...

Там же написано

20:17пожаловаться #10

Нужен класс, а ты инстанс передаёшь

20:18пожаловаться #11

А почему раньше то все работало - несколько лет

20:18пожаловаться #12

20:18пожаловаться #13

Roma

Доброго времени суток! Обновился до scrapy 1.7.3 и не пойму в чем дело.. Кто нибудь сталкивался с ошибкой подобной?

Потому что ты обновился?)

20:18пожаловаться #14

ну че то в новой версии исправили или пофиксили старые баги

20:19пожаловаться #15

Ты же и сам скинул ишуе где объясняют почему работало)

20:20пожаловаться #16

)) да не очень то понимаю все равно

20:21пожаловаться #17

Пишут, что раньше работало по случайности, там всё равно создавался новый экземляр класса, вместо того что задаешь

20:22пожаловаться #18

Теперь добавили нормальную ошибку

20:22пожаловаться #19

Спасибо - пошел репу чесать как отделаться меньшей кровью - видать я хорошо себя чувствовал с этой багой