Size: a a a

2021 June 02

S

SoHard 🎄 in Scrapy
тебе только это
источник

AT

Andy Top in Scrapy
Аа, извините
источник

k

kurashh in Scrapy
йоу, кто-то создавал апликухи для фейсбука?
Что нужно сдеать для oauth?
источник

МС

Михаил Синегубов... in Scrapy
предполагаю, пройти авторизацию
ведь есть же либы для этого, вроде...
источник

k

kurashh in Scrapy
я не совсем понимаю, нужно выделять для этого сайт и впихивать туда oauth
или можно обойтись https://graph.facebook.com/v10.0/oauth/ ?
источник
2021 June 03

ИК

Иван Кемаев... in Scrapy
Всем привет, кто-нибуль знает как в scrapy обстоят дела с асиннхронностю? (Можно ли делать асирхроные запросы и асинхронные задачи?)
источник

AR

Andrey Rahmatullin in Scrapy
Весь скрапи асинхронный, уточняй вопрос
источник

SS

Stepan Smirnov in Scrapy
А скачивание файлов с Google Drive чем-то отличается от работы с обычными сайтами? Нужны ли для этого сайта куки, прокси, решение каптчи?
источник

AR

Andrey Rahmatullin in Scrapy
апи возьми. ну, если есть
источник

МС

Михаил Синегубов... in Scrapy
Так вроде апишка открытая, либы, вроде, то же есть.
Насчёт, "банит ли" вот ты нам и расскажешь😂
Но, не должны, думаю тяжело отделить хороших от плохих, в такой ситуации
источник

S

SoHard 🎄 in Scrapy
Есть апи
источник

H

Harsh in Scrapy
источник

SS

Stepan Smirnov in Scrapy
It seems that it is
источник

SS

Stepan Smirnov in Scrapy
А какие есть способы задеплоить scrapy project кроме:
Scrapy Cloud, Scrapyd(web), кастомного решения
источник

AR

Andrey Rahmatullin in Scrapy
к хероке что-то было, но уже стухло
источник

AR

Andrey Rahmatullin in Scrapy
ещё была в гугле парочка дашбордов, один к scrapyd, другой вроде стандалон, но хз насколько они дохлые, больше я про них не слышал
источник

H

Harsh in Scrapy
Okay.
So if target file are small, we could try and fiddle with gdrive url.
We weren't able to replicate code for larger files
источник

MZ

Marsel Ziatdinov in Scrapy
Привет, ребят. Есть маленький вопросик. Есть метод у ItemLoader() load_item(), который возвращает словарь. В моём случае новость. И, как я понял, этот метод или какой-то другой в ItemLoader() вставляет в значения в словари '\n'. Получается такая картина.
источник

MZ

Marsel Ziatdinov in Scrapy
Можно ли как-то убрать '\n'. Или они вставляются только в print()
источник

SS

Stepan Smirnov in Scrapy
do you know what's a "larger file"? 100 MB+ ?
источник