В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

380 membersпожаловаться на группу
2019 September 23

V

Victor in Scrapy
Как сделать проверку, почему пост вопрос возвращает ошибку 400
источник
22:30пожаловаться#1

V

Victor in Scrapy
Не могу понять указал ли не правильно json, или ещё headers
источник
22:31пожаловаться#2

К

Кирилл in Scrapy
Victor
Как сделать проверку, почему пост вопрос возвращает ошибку 400
Какие-то параметры неправильные
источник
22:32пожаловаться#3

К

Кирилл in Scrapy
А сервер принимает json?
источник
22:32пожаловаться#4

V

Victor in Scrapy
Пробовал и data и json
источник
22:33пожаловаться#5

К

Кирилл in Scrapy
Так ты сначала найди пример  запроса, который сайт сам себе отправляет.
А потом копируй и вставляй свои данные
источник
22:34пожаловаться#6

К

Кирилл in Scrapy
Может быть сервер там и не ждет json
источник
22:34пожаловаться#7

V

Victor in Scrapy
Я могу сюда пример ответа кинуть?
Или лучше в личку?
источник
22:44пожаловаться#8

К

Кирилл in Scrapy
Victor
Я могу сюда пример ответа кинуть?
Или лучше в личку?
Можешь в личку, но посмотрю уже завтра
источник
22:45пожаловаться#9

V

Victor in Scrapy
Ок, спасибо
источник
22:45пожаловаться#10

JW

John Wayne in Scrapy
Кирилл
Только придумай что-то насчет того цикла, иначе будет только 1 файл
Спасибо, оказывается нужно юзать дефолтный пайплайн, а у меня там было наколхожено, что '%(file_name_csv)s' воспринимал как строку, а не как мега магическую строку.
А на счет цикла надо думать, ибо да в один файл складывает...
источник
23:14пожаловаться#11
2019 September 25

JW

John Wayne in Scrapy
Возник вопрос,у инстаграма вроди как 200 запросов в час на аккаунт лимит? А если, менять аккаунты, там дальше есть подводные камни, вроде по ip ограничение(меняй не меняй акки) или капча?
источник
02:02пожаловаться#12

МС

Михаил Синегубов in Scrapy
По ip блок идет
источник
06:07пожаловаться#13

L

Lex in Scrapy
затык с selenium случился
из консоли драйвер запускается и нормально отрабатывает
когда тот же код отрабатывается из паука - страница прогружается не полностью
в какую сторону копать?
источник
06:13пожаловаться#14

L

Lex in Scrapy
Кажется, нашел причину.
у меня в стартовом юрл есть кусок t.ru/#!/live
теперь вопрос: как бы его нормально записать? )
источник
06:35пожаловаться#15

i

ildar in Scrapy
Либо экрвнировать слеши,либо r't.ru/#! /live'  писать, но вообще вангую там лучше всего зайдет percent-encoding
источник
06:48пожаловаться#16

L

Lex in Scrapy
и сырые строки пробовал, и экранировать  - не хочет )
источник
06:49пожаловаться#17

L

Lex in Scrapy
ildar
Либо экрвнировать слеши,либо r't.ru/#! /live'  писать, но вообще вангую там лучше всего зайдет percent-encoding
а вот за percent-encoding - спасибо, в жизни не додумался бы
источник
06:50пожаловаться#18
2019 September 26

L

Lex in Scrapy
но это и не помогло, передал корявый url в self.driver.get() - не уверен, что корректно, но заработало
источник
03:48пожаловаться#19

MS

Maxym Shyrchenko in Scrapy
Привет, только начал, разбираться с скрапи, не судите строго.
источник
11:55пожаловаться#20