В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

663 membersпожаловаться на группу
2020 October 21

К

Кирилл in Scrapy
Будем надеяться что индусы решают лучше тебя)
источник
10:49пожаловаться#1

ЛГ

Лев Гареев in Scrapy
SoHard 🎄
ты спалился что парсишь
да я понял
источник
10:49пожаловаться#2

S

SoHard 🎄 in Scrapy
Кирилл
Будем надеяться что индусы решают лучше тебя)
он разорится на индусах
источник
10:49пожаловаться#3

ЛГ

Лев Гареев in Scrapy
Кирилл
Будем надеяться что индусы решают лучше тебя)
:D
источник
10:49пожаловаться#4

ЛГ

Лев Гареев in Scrapy
поэтому идем читать про прокси
источник
10:50пожаловаться#5

S

SoHard 🎄 in Scrapy
желательно и то и другое
источник
10:50пожаловаться#6

К

Кирилл in Scrapy
Прокси не панацея от капчи, иногда вообще не помогает. Зависит от сайта конечно
источник
10:51пожаловаться#7

i

i in Scrapy
ну надо смотреть на чем тебя палят. Иногда срабатывает даже простой ротатор юзерагентов + может быть ротейт прокси. А иногда сайт сразу палит (к примеру, upwork, там конечно есть цивильное api, но просто как пример сайта, что сразу палит селениум и показыват капчу снова и снова)
источник
10:54пожаловаться#8

МС

Михаил Синегубов... in Scrapy
кстати, насчте "сайт палит" с авитой сейчас только у меня проблема?
источник
10:58пожаловаться#9

МС

Михаил Синегубов... in Scrapy
у меня вообще, какая то непонятная ржака, запрашиваю страницу https://www.avito.ru/rolfcenter/
1. скрапи на прямую - каптча
2. скрапи с прокси чарлика (захотел посмотреть заголовки) - норм
3. постман - норм

мне идти ауру чистить или я не один такой везучий?
источник
11:03пожаловаться#10

i

i in Scrapy
а дай какой-нибудь css/xpath, прогоню скрапи шелл
источник
11:04пожаловаться#11

AR

Andrey Rahmatullin in Scrapy
как-то хитро фингерпринтит
источник
11:04пожаловаться#12

i

i in Scrapy
а можешь не давать: response   <403 https://www.avito.ru/rolfcenter/>
Авито
РОЛЬФ Центр | Автомобили с пробегом
РОЛЬФ Центр Автомобили с пробегом: самый большой выбор честных автомобилей с пробегом в Москве.

В нашем дилерском центре огромный выбор автомобилей в наличии более 70 брендов в различных ценовых категориях. Какой бы автомобиль Вы не искали, бюджетный г...
источник
11:05пожаловаться#13

i

i in Scrapy
view(response) показывает:
источник
11:05пожаловаться#14

i

i in Scrapy
источник
11:06пожаловаться#15

i

i in Scrapy
сразу тупо с первого запроса)
источник
11:06пожаловаться#16

l

linuxoid in Scrapy
Авито?)
источник
11:09пожаловаться#17

l

linuxoid in Scrapy
Ну ну)))
источник
11:09пожаловаться#18

МС

Михаил Синегубов... in Scrapy
linuxoid
Авито?)
таки ви что то знаете? 🧐
источник
11:11пожаловаться#19

МС

Михаил Синегубов... in Scrapy
тока не говори, что там заморочки с сертификатами...
источник
11:11пожаловаться#20