m
Size: a a a
2021 May 04
H
МС
сразу отмечу, потом не паниковал, оно посылает сигнал закрытия, но, все что уже успело отправить (запросы) дождется и обработает. Т.е. закроется не мгновенно.
Часто насчет этого задают вопросы "а почему долго закрывает"
Часто насчет этого задают вопросы "а почему долго закрывает"
AA
Всем привет, может кто-то юзал что-то уже для управлениями сессиями (сохранения/извлечения).
Меня интересует скрапинг от пользователей. Чтобы я один раз залогинился и дальше юзал сессию при последующих запусках, пока она не истечёт. Из нормального нашёл вроде вот эту штуку
https://github.com/ThomasAitken/scrapy-sessions
подойдёт она?
Меня интересует скрапинг от пользователей. Чтобы я один раз залогинился и дальше юзал сессию при последующих запусках, пока она не истечёт. Из нормального нашёл вроде вот эту штуку
https://github.com/ThomasAitken/scrapy-sessions
подойдёт она?
2021 May 05
ΔΧ
и я получаю некую страницу с js, который ума не приложу как дальше выполнить, чтоб получить нужный json
я до этого уже доходил через copy as fetch
https://ghostbin.co/paste/z2s2yjj
я до этого уже доходил через copy as fetch
https://ghostbin.co/paste/z2s2yjj
B
Может не тот запрос смотришь? Ты получаешь страницу с фингерпринтом. Поставь в хроме на скрипте брейкпоинт и попробуй вбить window.location.href
AA
Никому чтоль за всё время не понадобился подобный функционал?
AR
я тоже не очень понял зачем https://github.com/ThomasAitken/scrapy-sessions и поудивлялся написанным там клеймам
AR
но раз его сделали только на днях, значит правда никому не надо
AR
разве что про вторую проблему тут иногда жалуются
МС
люди, подскажите нубятине, как asyncio подключить?
в сеттингах прописал
матириться:
Twisted==21.2.0
@wrar42 ты вроде мержил поддержку 21 версии твистеда...
куда бечь? памагиииитеее🥺
в сеттингах прописал
TWISTED_REACTOR = "twisted.internet.asyncioreactor.AsyncioSelectorReactor"
матириться:
TypeError: SelectorEventLoop required, instead got: <ProactorEventLoop running=False closed=False debug=False>
Twisted==21.2.0
@wrar42 ты вроде мержил поддержку 21 версии твистеда...
куда бечь? памагиииитеее🥺
AR
где-то реактор импортится раньше чем скрапи его выставит
AR
версия твистеда не важна вроде
AR
хотя если это венда то я навсидку не помню, слишком много переменных
AR
а, про лупы же, не про реакторы
AR