Телеграмм чат группы scrapy

Size: a a a

Scrapy

828 membersпожаловаться на группу

2021 April 13

SoHard 🎄 in Scrapy

Ссылка на предпоследнюю

источник

16:43пожаловаться #1

SoHard 🎄 in Scrapy

Скорее всего, сайт я не видел

источник

16:43пожаловаться #2

Alex in Scrapy

Так вроде и сказали, что нужна предпоследняя...

Не в том смысле

МС

Михаил Синегубов... in Scrapy

предпоследняя ссылка, которая подписана "следующая страница"

источник

16:44пожаловаться #5

SoHard 🎄 in Scrapy

Если последняя 100 то на ней ссылка в пагинаторе будет на 99

источник

16:45пожаловаться #6

Alex in Scrapy

links = '//ul[@class="pages cfix"]/a'
s_to_last = ''.join([link for link in links if 'предпоследняя' in link.text_content()])

источник

16:48пожаловаться #7

Alex in Scrapy

как-то так можно. Т.е. выцепливать по наличию ключевого слова

источник

16:49пожаловаться #8

Alex in Scrapy

а, еще и strip добавить

источник

16:50пожаловаться #9

Andrey Rahmatullin in Scrapy

пошёл колхоз

источник

16:57пожаловаться #10

Alex in Scrapy

можно еще более индусски извернуться. Главное правило разработки ПО - писать неподдерживаемый код и тогда ты всегда будешь при деле )))

источник

17:07пожаловаться #11

Patriot in Scrapy

привет.
кто с парсингом и авторизацией может подсказать? пользую сессии, авторизация проходит норм, а следующая страница почему-то не срабатывает, говорит не авторизован

источник

17:11пожаловаться #12

Andrey Rahmatullin in Scrapy

какая версия скрапи?

источник

17:12пожаловаться #13

Patriot in Scrapy

просто реквестами

источник

17:13пожаловаться #14

Oleg Shleiko in Scrapy

сохрани куки и используй при следующем запросе. Хочешь из коробки - накати скрапи и разберись с ним