В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

859 membersпожаловаться на группу
2021 May 24

S

Stanislav in Scrapy
ничего не получается в логе тишина либо я не туда смотрю.  Показывает что 2021-05-24 19:32:12 [scrapy.core.engine] DEBUG: Crawled (200) <GET https://metalloprokat-nsk.pulscen.ru/catalog/k-5022590-list_medny_gost_1173_2006> (referer: https://metalloprokat-nsk.pulscen.ru/catalog). а если руками через shell то все норм все выдает. конкретно это я победил просто увеличил время в DOWNLOAD_DELAY = 5.
metalloprokat-nsk.pulscen.ru
Лист медный ГОСТ 1173-2006, цена в Новосибирске от компании ПКФ Айсберг АС в г. Новосибирск
Каталог с актуальными ценами и наличием: Лист медный ГОСТ 1173-2006 в Новосибирске. Прайс-лист компании ПКФ Айсберг АС в г. Новосибирск.
источник
19:35пожаловаться#1

AR

Andrey Rahmatullin in Scrapy
ничо не понял
источник
19:36пожаловаться#2

AR

Andrey Rahmatullin in Scrapy
если ответ на запрос получен, но код ничего не выдал, дебаж код
источник
19:36пожаловаться#3

S

Stanislav in Scrapy
да вроде норм хоть отвечают. без посыла нафиг
источник
19:36пожаловаться#4

BG

Bashir Gaitukiev in Scrapy
Я так туплю сейчас, на ровном месте застрял😅😭
В общем когда я ставлю в 21 строчке в "page": цифру 1,2 или любую другую, то программа парсит эту страницу. А когда я создал цикл на 10ой строчке, и поставил {page} в 21ой строчке, то программа парсит первую страницу 206 раз, вместо того чтобы прйтись по каждой😒
источник
20:51пожаловаться#5

К

Кирилл in Scrapy
А где ты назначаешь число?
источник
20:55пожаловаться#6

BG

Bashir Gaitukiev in Scrapy
в 21 строчке , там где стоит {page}
источник
20:56пожаловаться#7

К

Кирилл in Scrapy
Нет, оно там не назначается, это просто строка, переменная из цикла никуда не задается
источник
20:57пожаловаться#8

BG

Bashir Gaitukiev in Scrapy
вот,если я уберу цикл,и буду ставить вместо {page} цифры,например 5,то программа спарсит эту 5 страницу.
источник
20:57пожаловаться#9

BG

Bashir Gaitukiev in Scrapy
но я решил циклом пробежаться
источник
20:57пожаловаться#10

BG

Bashir Gaitukiev in Scrapy
всего страниц 206
источник
20:58пожаловаться#11

К

Кирилл in Scrapy
Ты знаешь как переменную вставить в строку?
источник
20:58пожаловаться#12

BG

Bashir Gaitukiev in Scrapy
так))
источник
20:59пожаловаться#13

BG

Bashir Gaitukiev in Scrapy
сейчас чекну)
источник
21:00пожаловаться#14

К

Кирилл in Scrapy
https://stackoverflow.com/a/2962966
Stack Overflow
How do I put a variable inside a string?
I would like to put an int into a string. This is what I am doing at the moment:

num = 40
plot.savefig('hanning40.pdf') #problem line
I have to run the program for several different numbers, so I'd
источник
21:01пожаловаться#15

A

Andrii in Scrapy
Даже такое есть на стеке?)
источник
21:02пожаловаться#16

BG

Bashir Gaitukiev in Scrapy
f забыл поставить))
источник
21:02пожаловаться#17

BG

Bashir Gaitukiev in Scrapy
ну я звезд с неба не хватаю😂😂
источник
21:03пожаловаться#18

(

(o_O) in Scrapy
С урла параметры убери, раз словарем их даешь
источник
21:04пожаловаться#19

К

Кирилл in Scrapy
В более сжатом и понятном виде, чем в офф доке, так что имеет место быть)
источник
21:04пожаловаться#20