Телеграмм чат группы scrapy_python страница 801

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

380 membersпожаловаться на группу

2019 August 16

R

Владислав Литвинюк

А в амо срм, есть, например 10 строк, а в одном из столбцов в одной ячейке может быть значений 3 штуки, например
Покупатель Доход ID
а 100 [{'id': 1},
{'id': 2}]

б 200 [{'id': 2},
{'id': 3}]

в 500 [{'id': 2}]

А как это относится к requests то вообще? Вам пришел ответ - а то что он не такой как вам хотелось - это уже ваша проблема

источник

19:18пожаловаться #1

ВЛ

Владислав Литвинюк in Scrapy

А как это относится к requests то вообще? Вам пришел ответ - а то что он не такой как вам хотелось - это уже ваша проблема

На счёт requests, я понял, что там можно делать сложные запросы.
Это был ответ о проблеме: У меня большие трудности возникли при распарсинга json

источник

19:20пожаловаться #2

К

Кирилл in Scrapy

с json все хорошо) или ты не понимаешь что оттуда тебе нужно или там этого нет

источник

19:21пожаловаться #3

К

Кирилл in Scrapy

так или иначе, скарпи это не исправит

источник

19:21пожаловаться #4

R

Json это наилушее что можно получить при парсинге

источник

19:21пожаловаться #5

ВЛ

Владислав Литвинюк in Scrapy

с json все хорошо) или ты не понимаешь что оттуда тебе нужно или там этого нет

хочу просто в pd.df был :)
А этот ответ я не понимаю как побороть. Вот я сделал так:

a_leads = []
for i in df['ID']:
     a_leads += i

И у меня выйшло что в этого столбца в 2+ раза больше строк чем у самого df и как его смерджить я так и не понял
Пробовал через normalize, with.. ошибку выдавало

источник

19:24пожаловаться #6

R

Ну ваша проблема никоим образом не относится ни к парсингу, ни к реквесту ни к скрапи....То что у вас возникла сложность с распарсиванием json - это уже совсем другое

источник

19:25пожаловаться #7

К

Кирилл in Scrapy

с пандой не подскажу.. пойми какой тип тебе нужен, и преобразуй его, если тут список словерей, а тебе нужен список, тогда сделай это

источник

19:26пожаловаться #8

ВЛ

Владислав Литвинюк in Scrapy

с пандой не подскажу.. пойми какой тип тебе нужен, и преобразуй его, если тут список словерей, а тебе нужен список, тогда сделай это

в pd.df я могу и потом превратить, главное, чтобы не было такого вложения

источник

19:27пожаловаться #9

К

Кирилл in Scrapy

если нормально сформулируешь что тебе нужно, тогда тебе помогут) к примеру так:
есть это [{'id': 1}, {'id': 2}] а нужно это [1, 2]

источник

19:28пожаловаться #10

G

Grigory in Scrapy

А можно у разрабов скрапи напрямую парсер

источник

19:32пожаловаться #11

G

Grigory in Scrapy

Заказать?

источник

19:32пожаловаться #12

ВЛ

Владислав Литвинюк in Scrapy

если нормально сформулируешь что тебе нужно, тогда тебе помогут) к примеру так:
есть это [{'id': 1}, {'id': 2}] а нужно это [1, 2]

У нас есть

[{'id': 1, 'sts' : 'A', 'cost' : 200} ,   
{'id': 3, 'sts' : 'A', 'cost' : 500}]

а нужно

{'id' : [1, 3], 'sts' = ['A', 'A'], 'cost' = [200, 500]}

Скажите, пожалуйста, как это сделать?

источник

19:38пожаловаться #13

К

Кирилл in Scrapy

for obj in a:
    for k, v in obj.items():
        if k not in b:
            b[k] = []
        b[k].append(v)

источник

19:41пожаловаться #14

К

Кирилл in Scrapy

a = input_data
b = {}

источник

19:42пожаловаться #15

К

Кирилл in Scrapy

a = input_data
b = {}

это вначале

источник

19:42пожаловаться #16

ВЛ

Владислав Литвинюк in Scrapy

спасибо больше начну разбираться

источник

19:42пожаловаться #17

BL

Boris Litvyakov in Scrapy

кто-то парсил 2гис через веб? интересует какие лимиты на одно соединение

источник

23:17пожаловаться #18

2019 August 17

МС

Михаил Синегубов in Scrapy

Раньше никаких лимитов не было. Как щас - хз

источник

09:51пожаловаться #19

O

Как с помощью CSS селекторов, спарсить OPTION где data-stock="In_stock"?

источник

13:42пожаловаться #20