Size: a a a

2020 March 06

МС

Михаил Синегубов in Scrapy
Мак
а кто его пробовал то... с гита склонировал просто и все
ты про скрапи-до? я череж пип ставил
источник

М

Мак in Scrapy
не, я про проект...
источник

МС

Михаил Синегубов in Scrapy
бррр,  я нить твоих мыслей потерял.... 😂
источник

М

Мак in Scrapy
pip scrapy-do
потом git clone
scrapy-do scrapy-do
scrapy-do-cl push-project
источник

МС

Михаил Синегубов in Scrapy
объясняю, единственное место, которое выдает такую ошибку :
        scrapy = find_executable('scrapy')
       if scrapy is None:
           raise EnvironmentError('Please install scrapy')

       ret = yield getProcessOutputAndValue(scrapy, ('list',),
                                            path=temp_proj_dir)
       out, err, ret_code = ret

       if ret_code != 0:
           shutil.rmtree(temp_dir)
           os.remove(tmp[1])
           raise ValueError('Unable to get the list of spiders')


я не спец, но, по меоему,  getProcessOutputAndValue(scrapy, ('list',), path=temp_proj_dir) аналогично комманде scrapy list
источник

М

Мак in Scrapy
и получаю Unable to get the list of spiders
источник

МС

Михаил Синегубов in Scrapy
🤬
источник

МС

Михаил Синегубов in Scrapy
выполи тут же scrapy list
источник

AR

Andrey Rahmatullin in Scrapy
дак важно в каком каталоге это делать
источник

AR

Andrey Rahmatullin in Scrapy
тут временный какой-то судя по переменным
источник

МС

Михаил Синегубов in Scrapy
Andrey Rahmatullin
дак важно в каком каталоге это делать
код из scrapy-do это из метода "def push_project(self, data):"
https://github.com/ljanyst/scrapy-do/blob/3929bb66d910803e7ec9cee77dcbe1df39c9a572/scrapy_do/controller.py#L238
источник

AR

Andrey Rahmatullin in Scrapy
да пофигу откуда, главное что "выполни руками и сравни" надо делать в тех же условиях
источник

МС

Михаил Синегубов in Scrapy
оно да, временная папка, куда архив распаковывается для проверки
источник

AR

Andrey Rahmatullin in Scrapy
может в архив не положилось что-то или распаковалось не туда
источник

МС

Михаил Синегубов in Scrapy
Мак
и получаю Unable to get the list of spiders
ну, получилось? :)
источник

МС

Михаил Синегубов in Scrapy
кстати, а git clone разве не создает папку, в которой уже лежит там проект
источник

М

Мак in Scrapy
чего получилось то?
источник

М

Мак in Scrapy
Михаил Синегубов
кстати, а git clone разве не создает папку, в которой уже лежит там проект
а у тебя какое взаиморасположение папок проекта тех, что создает scrapy-do?
источник

MV

Maksim Vladimirovich in Scrapy
Мак
парни, на виндовый сервак кто нибудь скрапи деплоил? ))))
У меня на винде впс
источник

МС

Михаил Синегубов in Scrapy
Мак
а у тебя какое взаиморасположение папок проекта тех, что создает scrapy-do?
я и по дефолту оставлял, и кастомную делал. оно на домешнем компе все
источник