AK
How to set scrapy log only for a particular method in the class.?
Size: a a a
2020 March 08
AK
Anil Kumar
How to set scrapy log only for a particular method in the class.?
Please anyone reply
B
Anil Kumar
How to set scrapy log only for a particular method in the class.?
self.logger.info(‘text’) ?
AK
I don't want everyline to get into log. I want to log only if a particular condition is satisfied. How to do it
i
Чего геморного? У меня на винде сплеш из джокера спокойно работает
На винде есть проблема, если ставить докер, он хочет виндовый hyper-v, а тот мощно конфликтует с vmware, виртуалки с ней тупо стартовать перестают. И просто так обратно все назад уже не вернуть, надо потанцевать с бубном, выполнить спецскрипт на три страницы, и он не всегда еще срабатывает.
М
На винде есть проблема, если ставить докер, он хочет виндовый hyper-v, а тот мощно конфликтует с vmware, виртуалки с ней тупо стартовать перестают. И просто так обратно все назад уже не вернуть, надо потанцевать с бубном, выполнить спецскрипт на три страницы, и он не всегда еще срабатывает.
Вот вы сейчас на каком языке ругаетесь?)) вообще никаких конфликтов ни с докером ни с виртуалками. Может если какой то специфичный запуск? Озвучте детальнее, для интереса
i
ну вот примерно что бывает у меня когда я ставлю виндовый докер, и что надо сделать, чтобы вернуть "как было": https://weblogs.asp.net/dixin/run-hyper-v-and-vmware-virtual-machines-on-windows-10
🇺L
Добрый день. С праздником. :D
Такой вопрос. Скажите, а возможна такая ситуация, например:
1. Есть сайт, с которого хочется стянуть все статьи.
2. Есть аккаунт на scrapinghub
Можно ли, используя только функционал scrapinghub прямо на нём написать код для scrapy spider (он же не очень отличается от обычного scrapy), там же отладить и выполнить (like scrapy shell!) и потом полученные данные просто сгрузить?
Такой вопрос. Скажите, а возможна такая ситуация, например:
1. Есть сайт, с которого хочется стянуть все статьи.
2. Есть аккаунт на scrapinghub
Можно ли, используя только функционал scrapinghub прямо на нём написать код для scrapy spider (он же не очень отличается от обычного scrapy), там же отладить и выполнить (like scrapy shell!) и потом полученные данные просто сгрузить?
AR
Яннп
AR
В scrapy cloud нет конечно никакого редактора
🇺L
Ок, добавим в связку ещё Git
AR
И в чем вопрос
AR
Пишешь, деплоишь, запускаешь
🇺L
То есть фактически возможно
AR
Я не понимаю отличий от обычного воркфлоу
🇺L
Скажем так, а они вообще есть?
🇺L
В бесплатном режиме?