FG
Мне надо запустить 10-20 спайдеров, лучше это сделать в 20 разных консолях или сделать 20 спайдеров в одном файле и запустить их?
Size: a a a
2020 April 26
FG
просто если надо будет пересобрать 1 парсер то все 19 упадут же
AБ
Скачал Selector Gadget, при попытке выделить нужную ссылку выделяет такую хрень
AБ
AБ
То что идёт после рекламы работает нормально
FG
как сделать так чтобы при запуске спайдера писало в консоли какой это спайдер а то с принтом 2 раза выводит так еще и из других спайдеров берет
B
Faginator Gerasimov
как сделать так чтобы при запуске спайдера писало в консоли какой это спайдер а то с принтом 2 раза выводит так еще и из других спайдеров берет
self.logger.info('spider %s' % self.name) или self.logger.info('spider %s' % self.__class__)B
Asen Баал
.mc.styleable-title - посмотрите любой туториал по CSSB
так стоп вы рекламу что-ли парсите 🙃
AБ
.mc.styleable-title - посмотрите любой туториал по CSSэто не сработает, но я кажется понял где собака порылась, виноват iframe
AБ
.mc.styleable-title - посмотрите любой туториал по CSSВ общем перещёл на нужный фрейм и в нём попытался кликнуть на элемент нужный, но элемент перекрывается не понятно чем, ошибка валится, если юзать Экшены то всё равно не кликает. В итоге на ссылку смог кликнуть только через исполнение JS.
AБ
Вопрос, а заметно ли сайтам когда по ссылке переходят не с помощью обычного клика, а с помощью клика через JS?
AR
теоретически да
A
как такое может быть
except (selenium.common.exceptions.NoSuchElementException, selenium.common.exceptions.StaleElementReferenceException):и еррор
selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element: {"method":"xpath","selector":"//button[@class='actionItem btn btn-dark' and contains(text(), 'Call')]"}AR
наверно такого элемента нет
AR
или в чём вопрос
A
так я ж в ексцепт запхал, если нет иди дальше
AR
а он чо?
A
а он еррор )
AR
изучай трейсбэк