В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

857 membersпожаловаться на группу
2021 June 12

OS

Oleg Shleiko in Scrapy
Всем привет! Проблема: парсим блоки с json, иногда встречается например такое
{"data": "test 1/2""}
если выдрать через response.xpath().get() то работаем уже с данными вида
{"data": "test 1/2""}
что не является валидным json... Как этого избегать?
источник
12:21пожаловаться#1

AR

Andrey Rahmatullin in Scrapy
Селектить тег, а не его содержимое, и убирать теги
источник
12:36пожаловаться#2

AR

Andrey Rahmatullin in Scrapy
Наверно
источник
12:36пожаловаться#3

AR

Andrey Rahmatullin in Scrapy
Как интересно джс такое обрабатывает
источник
12:36пожаловаться#4

OS

Oleg Shleiko in Scrapy
На выводе двойная кавычка
источник
12:45пожаловаться#5

AR

Andrey Rahmatullin in Scrapy
Вот блин
источник
12:46пожаловаться#6

AR

Andrey Rahmatullin in Scrapy
Ну можно регексами прямо респонс рубить конечно лол
источник
12:46пожаловаться#7

AR

Andrey Rahmatullin in Scrapy
А
источник
12:46пожаловаться#8

AR

Andrey Rahmatullin in Scrapy
Можно в респонсе это заменить на дважды эскейпнутое регексами и дальше парсить, другой вопрос как заменить только то что нужно
источник
12:47пожаловаться#9

OS

Oleg Shleiko in Scrapy
ну оно же в ответе как " значит можно только нужное...
источник
12:48пожаловаться#10

OS

Oleg Shleiko in Scrapy
Спасибо, буду пробовать
источник
12:48пожаловаться#11

AR

Andrey Rahmatullin in Scrapy
Но это в другом месте может быть правильно
источник
12:49пожаловаться#12

OS

Oleg Shleiko in Scrapy
тоже верно...
источник
12:50пожаловаться#13

AR

Andrey Rahmatullin in Scrapy
Для начала можно типа только внутри {} заменять
источник
12:51пожаловаться#14

AR

Andrey Rahmatullin in Scrapy
Всё равно такие хаки под конкретный сайт пишутся, а то и страницу, так что всё допустимо если работает
источник
12:51пожаловаться#15

OS

Oleg Shleiko in Scrapy
а как текст респонса вообще отредактировать?
источник
14:00пожаловаться#16

AR

Andrey Rahmatullin in Scrapy
создать селектор с нужной строкой и селетить по нему
источник
14:00пожаловаться#17

AR

Andrey Rahmatullin in Scrapy
scrapy.Selector
источник
14:01пожаловаться#18

OS

Oleg Shleiko in Scrapy
спасибо
источник
14:01пожаловаться#19

М

Мур in Scrapy
С праздником господа
источник
18:09пожаловаться#20