Size: a a a

2021 April 22

S

SoHard 🎄 in Scrapy
наверное стоит начать писать нормально селекторы
источник

S

SoHard 🎄 in Scrapy
и делать get()
источник

N

Nelson in Scrapy
Скопировал путь из инструментов разработчика в фаерфокс
источник

S

SoHard 🎄 in Scrapy
источник

S

SoHard 🎄 in Scrapy
спасибо за стикер
источник

N

Nelson in Scrapy
Пригодился)
источник

S

SoHard 🎄 in Scrapy
ток заметил
источник

S

SoHard 🎄 in Scrapy
с какого хрена он тебе текст должен отдать если текст в елементе a
источник

S

SoHard 🎄 in Scrapy
а ты просишь из i
источник

S

SoHard 🎄 in Scrapy
который пустой
источник

N

Nelson in Scrapy
Я по примеру выше взял
источник

AR

Andrey Rahmatullin in Scrapy
пример был неправильный, да
источник

N

Nelson in Scrapy
А, я сам тупой
источник

N

Nelson in Scrapy
А хотя
источник

N

Nelson in Scrapy
Может и нет
источник

S

SoHard 🎄 in Scrapy
источник

N

Nelson in Scrapy
Да я понял уже
источник
2021 April 23

OS

Oleg Shleiko in Scrapy
Всем привет. Если кто-то юзает scrapy-rotated-proxy через файл, покажите пример его структуры, спасибо
источник

МС

Михаил Синегубов... in Scrapy
эм, да там стандартная
IP:PORT
источник

OS

Oleg Shleiko in Scrapy
неа, ошибка, что не может распарсить json

запихал всё это дело как:
["http://proxy:80",
"http://proxy:81"]

json распарсило, но кидает ошибку
2021-04-23 11:46:58 [scrapy_rotated_proxy.extensions.file_storage] INFO: FileProxyStorage opened
2021-04-23 11:46:58 [scrapy.utils.signal] ERROR: Error caught on signal handler: <bound method RotatedProxyMiddleware.spider_opened of <scrapy_rotated_proxy.downloadmiddlewares.proxy.RotatedProxyMiddleware object at 0x7fea1d12f880>>
Traceback (most recent call last):
 File "/usr/local/lib/python3.8/site-packages/twisted/internet/defer.py", line 1445, in _inlineCallbacks
   result = current_context.run(g.send, result)
 File "/usr/local/lib/python3.8/site-packages/scrapy_rotated_proxy/downloadmiddlewares/proxy.py", line 85, in spider_opened
   self.proxies = yield self.proxies_storage.proxies()
 File "/usr/local/lib/python3.8/site-packages/scrapy_rotated_proxy/extensions/file_storage.py", line 63, in proxies
   for item in self.settings.items():
AttributeError: 'list' object has no attribute 'items'
источник