В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

758 membersпожаловаться на группу
2020 December 06

D

Dmitry in Scrapy
Кирилл
Но сначала конечно проверь с заголовками в нижнем регистре
Да это еще тоже надо заморочиться как проверить - скрапи их автоматом капитализирует, а курл наоборот
источник
19:40пожаловаться#1

К

Кирилл in Scrapy
В той ссылке что Георгий скинул были варианты, хотя пишут что они не всем подходят
источник
19:42пожаловаться#2

К

Кирилл in Scrapy
В RFC пишут, что регистр не имеет значения, по стандарту, но чего только не бывает
источник
19:42пожаловаться#3

D

Dmitry in Scrapy
Понял, спасибо. Остальные реквесты там нормально парсятся, без всяких проблем, а именно этот залипает - вряд ли дело в регистре.
источник
19:43пожаловаться#4

D

Dmitry in Scrapy
Попробую для начала через requests
источник
19:43пожаловаться#5

К

Кирилл in Scrapy
Сохрани ещё эти запросы в текст и сделай diff, там точно покажет где отличия
источник
19:45пожаловаться#6

D

Dmitry in Scrapy
Через requests работает 🤪
источник
19:49пожаловаться#7

D

Dmitry in Scrapy
Кирилл
Да, забей в поиск TLS
Я тут подумал - вряд ли дело в TLS, если оба запроса идут через одинаковый локальный прокси (через этот http tool)?
источник
19:51пожаловаться#8

D

Dmitry in Scrapy
По-идее он же должен переустанавливать соединение - курл ругается что сертификат кривой при этом
источник
19:52пожаловаться#9

AR

Andrey Rahmatullin in Scrapy
угу
источник
19:52пожаловаться#10

D

Dmitry in Scrapy
Кирилл
Сохрани ещё эти запросы в текст и сделай diff, там точно покажет где отличия
Вот
источник
20:05пожаловаться#11

D

Dmitry in Scrapy
источник
20:05пожаловаться#12

D

Dmitry in Scrapy
Когда время будет, еще поковыряюсь, но пока просто requests обойдусь. Пока единственная рабочая гипотеза - это капитализация, как я понимаю.
источник
20:06пожаловаться#13

A

Andrii in Scrapy
Уже и курл и реквестс работает?
источник
20:10пожаловаться#14

D

Dmitry in Scrapy
Да, оба работают со свистом
источник
20:22пожаловаться#15

D

Dmitry in Scrapy
Только скрапи чудит
источник
20:22пожаловаться#16

A

Andrii in Scrapy
Версия скрапи?
источник
20:23пожаловаться#17

S

SoHard 🎄 in Scrapy
Dmitry
Да, оба работают со свистом
Tls
источник
20:23пожаловаться#18

D

Dmitry in Scrapy
2.4.1
источник
20:23пожаловаться#19

S

SoHard 🎄 in Scrapy
Уже пару раз писали
источник
20:23пожаловаться#20